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本 书 全 面 地 介绍 了 软件 测试 的 基本 理论 .基本 技术 和 常用 方法 以 及 近 几 年 新 的 软件 测试 技术 和 方 
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随 着 信息 时 代 的 到 来 ,人 们 对 软件 质量 的 要 求 越 来 越 高 ;同时 由 于 软件 系统 变 得 越 来 
越 复杂 ,如 何 提高 软件 质量 是 广大 计算 机 技术 人 员 所 关注 的 ,这 使 得 软件 开发 人 员 和 软件 
测试 人 员 面 临 着 巨大 挑战 。 

基于 这 种 情况 ,国内 许多 高 校 的 计算 机 、 软 件 工程 和 信息 技术 等 相关 专业 纷纷 开设 软 
件 测试 课程 以 培养 更 多 的 软件 测试 人 才 。 目 前 ,市场 上 的 软件 测试 教材 良 劳 不 齐 ,精品 
材 少 ,尤其 是 对 软件 测试 技术 介绍 全 面 、 深 入 的 教材 更 少 。 为 了 适应 当前 教学 和 软件 测试 
技术 人 员 的 需要 ,编者 查阅 了 大 量 国内 外 有 关 软 件 测试 方面 的 著作 和 文献 ,并 结合 自己 多 
年 的 从 业 和 教学 经 验 编写 了 这 本 教材 。 

本 书 的 特点 是 测试 技术 介绍 全 面 ,不 但 阐述 了 所 有 基本 的 软件 测试 技术 ,并 附 有 许多 
软件 测试 实例 ,从 而 使 读者 更 好 地 理解 和 掌握 软件 测试 的 基本 理论 ,可 以 迅速 地 应 用 到 实 
际 测试 工作 中 去 。 

全 书 共 分 9 章 。 第 1 章 绪 论 , 本 章 主要 介绍 软件 和 软件 危机 、 软 件 开发 过 程 、 软 件 缺 
陷 以 及 著名 软件 缺陷 案例 ,为 学 习 本 书 的 后 续 内 容 打 好 基础 ,做 好 准备 。 第 2 章 软件 测试 
基础 ,介绍 软件 测试 的 定义 、 软 件 测试 的 过 程 , 软 件 测 试 的 分 类 ,软件 测试 的 必要 性 ,软件 
测试 的 原则 等 。 第 3 章 黑 盒 测 试 , 介 绍 黑 盒 测 试 的 基本 概念 ,包括 等 价 类 划分 ,边界 值 分 
析 法 、 因 果 图 法 、 决 策 表 法 、 正 交 实验 设计 法 等 。 第 4 章 白 盒 测 试 ,介绍 白 盒 测 试 的 基本 概 
念 , 详 细 阑 述 了 语句 覆盖 、 判 定 覆 盖 、 条 件 覆 盖 、 判 定 /条 件 覆盖 ,条件 组 合 覆 盖 和 路 径 覆 盖 
等 白 盒 测 试 的 方法 以 及 基于 缺陷 模式 的 测试 技术 等 内 容 。 第 5 章 单元 测试 ,主要 讲解 单 
元 测试 概述 、 对 单元 测试 的 误解 ,单元 测试 的 必要 性 、 单 元 测试 环境 和 方法 、 单 元 测试 策 
略 .单元 测试 用 例 设计 和 单元 测试 过 程 。 第 6 章 集 成 测试 ,介绍 集成 测试 概念 、 集 成 测试 
策略 ,测试 用 例 设计 和 测试 过 程 等 。 第 7 章 系统 测试 ,本 章 从 性 能 测试 .可 靠 性 测试 、 安 全 
性 测试 .恢复 测试 ` 备 份 测试 .可 用 性 测试 .协议 测试 .文档 测试 .GUI 测试 .网 站 测试 、a 测 
试 和 有 B 测 试 .回归 测试 等 方面 介绍 系统 测试 。 第 8 章 自动 化 测试 及 工具 ,介绍 自动 化 测试 
概述 .自动 化 测试 的 实施 .自动 化 测试 工具 的 选择 和 比较 。 第 9 章 软件 测试 行业 综述 , 介 
绍 了 软件 测试 行业 的 现状 和 发 展 趋势 ,软件 测试 技术 的 发 展 方向 以 及 软件 测试 人 员 职 位 
和 责任 、 对 软件 测试 工程 师 的 要 求 。 本 书 的 附录 内 容 丰 富 . 既 有 工具 性 的 内 容 , 如 软件 测 
试 基本 术语 中 英文 词汇 、 正 交 表 和 IEEE 模板 ;也 有 非常 实用 性 的 内 容 , 如 软件 测试 工程 
师 面 试题 ` 软 件 测试 工程 师 考试 模拟 试题 及 解析 。 


本 书 在 编写 过 程 中 参阅 了 大 量 国 内 外 同行 的 著作 及 文献 ,汲取 了 软件 测试 领域 的 最 
新 知识 。 在 此 ,对 这 些 作者 表示 深 深 的 感谢 。 同 时 ,由 于 编者 的 水 平 有 限 .时 间 仓 促 , 书 中 
难免 存在 错误 和 不 足 之 处 ,希望 大 家 批评 指正 。 
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第 1 章 8 R 


随 着 1946 年 第 一 台电 子 计算 机 的 诞生 ,计算 机 软件 也 开始 走 进入 们 的 视野 。 由 于 软 
件 的 复杂 度 的 增加 ,导致 软件 危机 的 产生 ,由 于 软件 缺陷 引起 了 很 多 著名 的 软件 缺陷 案 
例 ,在 20 世纪 70 年 代 逐 渐 形 成 了 软件 工程 的 概念 。 

本 章 主 要 介绍 软件 和 软件 危机 、 软 件 开发 过 程 、 软 件 缺陷 以 及 著名 软件 缺陷 案例 ,为 
学 习 本 书 的 后 续 内 容 打 好 基础 ,做 好 准备 。 


1.1 软件 和 软件 危机 


计算 机 系统 分 为 硬件 系统 和 软件 系统 。 软 件 是 软件 开发 的 基础 ,软件 在 现代 社会 占 
有 重要 的 地 位 ,软件 产业 已 经 成 为 信息 社会 的 支柱 产业 之 一 。 


1.1.1 计算 机 软件 


1. 软件 的 概念 


计算 机 软件 (Computer Software) 是 指 计算 机 系统 中 的 程序 ,数据 及 其 文档 。 程 序 是 
计算 任务 的 处 理 对 象 和 处 理 规则 的 描述 。 文 档 是 为 了 便于 了 解 程序 所 需 的 阐明 性 资料 。 
程序 必须 装 入 机 器 内 部 才能 工作 ,文档 一 般 是 给 人 阅读 的 ,不 一 定 装 入 机 器 。 

软件 是 用 户 与 硬件 之 间 的 接口 界面 。 用 户主 要 是 通过 软件 与 计算 机 进行 交流 。 软 件 
是 计算 机 系统 设计 的 重要 依据 。 为 了 方便 用 户 ,为 了 使 计算 机 系统 具有 较 高 的 总 体 效 用 ， 
在 设计 计算 机 系统 时 ,必须 通盘 考虑 软件 与 硬件 的 结合 以 及 用 户 的 要 求 和 软件 的 要 求 。 


2. 计算 机 软件 分 类 


计算 机 软件 总 体 分 为 系统 软件 和 应 用 软件 两 大 类 。 

系统 软件 是 负责 管理 计算 机 系统 中 各 种 独立 的 硬件 .使 得 它们 可 以 协调 工作 。 系 统 
软件 使 得 计算 机 使 用 者 和 其 他 软件 将 计算 机 视 为 一 个 整体 而 不 需要 顾及 底层 每 个 硬件 是 
如 何 工作 的 。 

系统 软件 包括 各 类 操作 系统 ,如 Windows, Linux, UNIX 等 ,还 包括 操作 系统 的 补丁 
程序 及 硬件 驱动 程序 ,这 些 都 是 系统 软件 类 。 此 外 ,系统 软件 还 包括 一 系列 基本 的 工具 软 
件 ( 比 如 编译 器 ,数据库 管理 .存储 器 格式 化 、 文 件 系统 管理 ,用户 身份 验证 、 驱 动 管理 、 网 
络 连接 等 方面 的 工具 ) 。 

应 用 软件 是 为 了 某 种 特定 的 用 途 而 开发 的 软件 。 它 可 以 是 一 个 特定 的 程序 ,比如 一 
个 图 像 浏 览 器 ;也 可 以 是 一 组 功能 联系 紧密 ,可 以 互相 协作 的 程序 的 集合 ,比如 微软 公司 


《软件 测试 技术 教程 》 


的 Office 软件 ;还 可 以 是 一 个 由 众多 独立 程序 组 成 的 庞大 的 软件 系统 ,比如 数据 库 管 理 
系统 。 应 用 软件 可 以 进一步 细 分 ,如 工具 软件 、 游 戏 软 件 、 管 理 软 件 等 都 属于 应 用 软件 类 。 


3. 几 种 软件 的 功能 


1) 操作 系统 

操作 系统 是 管理 ,控制 和 监督 计算 机 软 硬 件 资源 协调 运行 的 程序 系统 ,由 一 系列 具有 
不 同 控制 和 管理 功能 的 程序 组 成 , 它 是 直接 运行 在 计算 机 硬件 上 的 、 最 基本 的 系统 软件 ， 
是 系统 软件 的 核心 。 操 作 系统 是 计算 机 发 展 中 的 产物 ,其 主要 目的 有 两 个 : 一 是 方便 用 
户 使 用 计算 机 ,是 用 户 和 计算 机 的 接口 。 比 如 用 户 输入 一 条 简单 的 命令 就 能 自动 完成 复 
杂 的 功能 ,这 就 是 操作 系统 帮助 的 结果 ;二 是 统一 管理 计算 机 系统 的 全 部 资源 ,合理 组 织 
计算 机 工作 流程 ,以 便 充 分 合理 地 发 挥 计算 机 的 效率 。 

2) 语言 处 理 程序 (翻译 程序 ) 

机 器 语言 是 计算 机 唯一 能 直接 识别 和 执行 的 程序 语言 。 如 果 要 在 计算 机 上 运行 高 级 
语言 程序 就 必须 配备 程序 语言 翻译 程序 (或 简称 翻译 程序 )。 翻 译 程序 本 身 是 一 组 程序 ， 
不 同 的 高 级 语言 都 有 相应 的 翻译 程序 。 

3) 服务 程序 

服务 程序 能 够 提供 一 些 常 用 的 服务 ,它们 为 用 户 开 发 程序 和 使 用 计算 机 提供 了 方便 ， 
像 计算 机 上 经 常 使 用 的 诊断 程序 ,调试 程序 编辑 程序 均 属 此 类 。 

4) 数据 库 管 理 系 统 

在 信息 社会 里 ,社会 和 生产 活动 产生 的 信息 很 多 ,使 人 工 管理 难以 应 付 , 人们 希望 借 
助 计算 机 对 信息 进行 搜集 ,存储 、 处 理 和 使 用 。 数 据 库 系 统 就 是 在 这 种 需求 背景 下 产生 和 
发 展 的。 数据 库 是 指 按照 一 定 联系 存储 的 数据 集合 ,可 为 多 种 应 用 共享 。 数据 库 管 理 系 
统 则 是 能 够 对 数据 库 进 行 加 工 、 管 理 的 系统 软件 ,其 主要 功能 是 建立 、 消 除 .维护 数据 库 及 
对 库 中 数据 进行 各 种 操作 。 数 据 库 系统 主要 由 数据 库 、 数 据 库 管理 系统 以 及 相应 的 应 用 
程序 组 成 。 

5) 应 用 软件 

为 解决 各 类 实际 问题 而 设计 的 程序 系统 称 为 应 用 软件 。 从 其 服务 对 象 的 角度 ,又 可 
分 为 通用 软件 和 专用 软件 两 类 。 通 用 软件 通常 是 为 解决 某 一 类 问题 而 设计 的 ,而 这 类 问 
题 是 很 多 人 都 要 遇 到 和 解决 的 。 例 如 ,文字 处 理 、 表 格 处 理 、 电 子 演示 等 。 专 用 软件 则 针 
对 性 较 强 ,专用 软件 有 些 在 市 场 上 可 以 买 到 ,有 些 特殊 功能 和 需求 的 软件 需要 用 户 自 己 组 
织 开发 。 


1.1.2 软件 危机 
软件 危机 (Software Crisis) 泛 指 在 计算 机 软件 的 开发 和 维护 过 程 中 所 遇 到 的 一 系列 


严重 问题 。 落 后 的 软件 生产 方式 无 法 满足 迅速 增长 的 计算 机 软件 需求 ,从 而 导致 软件 开 
发 与 维护 过 程 中 出 现 一 系列 严重 问题 的 现象 。 


1. 软件 危机 的 由 来 


20 世纪 60 年 代 以 前 ,计算 机 刚刚 投入 实际 使 用 ,软件 设计 往往 只 是 为 了 一 个 特定 的 
应 用 而 在 指定 的 计算 机 上 设计 和 编制 ,采用 密切 依赖 于 计算 机 的 机 器 代码 或 汇编 语言 , 软 
件 的 规模 比较 小 ,文档 资料 通常 也 不 存在 ,很 少 使 用 系统 化 的 开发 方法 ,设计 软件 往往 等 
同 于 编制 程序 ,基本 上 是 个 人 设计 .个 人 使 用 .个 人 操作 、 自 给 自足 的 私人 化 的 软件 生产 
方式 。 

20 世纪 60 年 代 中 期 ,大 容量 ,高 速度 计算 机 的 出 现 ,使 计算 机 的 应 用 范围 迅速 扩大 ， 
软件 开发 急剧 增长 。 高 级 语言 开始 出 现 ;操作 系统 的 发 展 引 起 了 计算 机 应 用 方式 的 变化 ; 
大 量 数据 处 理 导致 第 一 代数 据 库 管理 系统 的 诞生 。 软 件 系 统 的 规模 越 来 越 大 ,复杂 程度 
越 来 越 高 ,软件 可 靠 性 问题 也 越 来 越 突出 。 原 来 的 个 人 设计 .个 人 使 用 的 方式 不 再 能 满足 
要 求 ,迫切 需要 改变 软件 生产 方式 ,提高 软件 生产 率 ,软件 危机 开始 爆发 。 

1968 年 北大 西洋 公约 组 织 的 计算 机 科学 家 在 联邦 德国 召开 国际 会 议 ,第 一 次 讨论 软 
件 危 机 问题 ,并 正式 提出 “软件 工程 ”一 词 ,从 此 一 门 新 兴 的 为 研究 和 克服 软件 危机 应 运 而 
生 的 学 科 , 软 件 工 程 学 诞生 了 。 


2. 软件 危机 的 主要 表现 


1) 软件 开发 费用 和 进度 失控 

费用 超支 .进度 拖延 的 情况 屡屡 发 生 。 有 时 为 了 赶 进度 或 压 成 本 不 得 不 采取 一 些 权 
宜 之 计 , 这 样 又 往往 严重 损害 了 软件 产品 的 质量 。 

2) 软件 的 可 靠 性 差 

尽管 耗费 了 大 量 的 人 力 ,物力 ,而 系统 的 正确 性 却 越 来 越 难 以 保证 ,出 错 率 很 高 ,由 于 
软件 错误 而 造成 的 损失 十 分 惊人 。 

3) 生产 出 来 的 软件 难以 维护 

很 多 程序 缺乏 相应 的 文档 资料 ,程序 中 的 错误 难以 定位 ,难以 改正 ,有 时 改正 了 已 有 
的 错误 又 引入 新 的 错误 。 随 着 软件 的 社会 拥有 量 越 来 越 大 ,维护 占用 了 大 量 人 力 ,物力 和 
财力 。 进 入 20 世纪 80 年 代 以 来 ,尽管 软件 工程 研究 与 实践 取得 了 可 喜 的 成 就 ,软件 技术 
水 平 有 了 长 足 的 进展 ,但 是 软件 生产 水 平 依然 远 远 落后 于 硬件 生产 水 平 的 发 展 速度 。 

4) 用 户 对 软件 系统 不 满意 现象 经 常 发 生 

一 方面 ,许多 用 户 在 软件 开发 的 初期 不 能 准确 完整 地 向 开发 人 员 表达 他 们 的 需求 ; 另 
一 方面 ,软件 开发 人 员 常 常 在 对 用 户 需 求 还 没有 正确 全 面 认识 的 情况 下 ,就 急于 编写 
程序 。 

5) 软件 成 本 逐年 上 升 

由 于 硬件 成 本 逐年 下 降 ,性 能 和 产量 迅速 提高 。 然 而 软件 开发 需要 大 量 人 力 , 软 件 成 
本 随 着 软件 规模 和 数量 的 剧 增 而 持续 上 升 。 从 美 . 日 两 国 的 统计 数字 表明 ,1985 年 度 软 
件 成 本 大 约 占 总 成 本 的 90%。 

6) 软件 开发 生产 率 提高 的 速度 远 远 跟 不 上 计算 机 应 用 迅速 普及 深入 的 需要 

软件 产品 供不应求 的 状况 使 得 人 类 不 能 充分 利用 现代 计算 机 硬件 所 能 提供 的 巨大 
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潜力 。 
3. 软件 危机 产生 的 原因 


如 此 多 的 软件 危机 表现 ,它们 产生 的 原因 是 什么 呢 ? 软件 工程 研究 结果 表明 ,软件 危 
机 的 原因 主要 有 以 下 两 个 。 

1) 与 软件 本 身 的 特点 有 关 

软件 不 同 于 硬件 , 它 是 计算 机 系统 中 的 逻辑 部 件 而 不 是 物理 部 件 。 软 件 具有 可 运行 
的 行为 特性 ,在 写 出 程序 代码 并 在 计算 机 上 试 运行 之 前 ,软件 开发 过 程 的 进展 情况 较 难 衡 
量 , 软 件 质量 也 较 难 评价 ,因此 管理 和 控制 软件 开发 过 程 十 分 困难 ;软件 质量 不 是 根据 大 
量 制造 的 相同 实体 的 质量 来 度量 ,而 是 与 每 一 个 组 成 部 分 的 不 同 实体 的 质量 紧密 相关 , 因 
此 ,在 运行 时 所 出 现 的 软件 错误 几乎 都 是 在 开发 时 期 就 存在 却 一 直 未 被 发 现 的 ,改正 这 类 
错误 通常 意味 着 改正 或 修改 原来 的 设计 ,这 就 在 客观 上 使 得 软件 维护 远 比 硬件 维护 困难 ; 
软件 是 一 种 信息 产品 ,具有 可 延展 性 ,属于 柔性 生产 ,与 通用 性 强 的 硬件 相 比 ,软件 更 具有 
多 样 化 的 特点 ,更 加 接近 人 们 的 应 用 问题 。 

2) 来 自 于 软件 开发 人 员 

软件 产品 是 人 的 思维 结果 ,因此 软件 生产 水 平 最 终 在 相当 程度 上 取决 于 软件 人 员 的 
教育 .训练 和 经 验 的 积累 ;对 于 大 型 软件 往往 需要 许多 人 合作 开发 ,甚至 要 求 软 件 开发 人 
员 深 入 应 用 领域 的 问题 研究 ,这 样 就 需要 在 用 户 与 软件 人 员 之 间 以 及 软件 开发 人 员 之 间 
相互 沟通 ,在 此 过 程 中 难免 发 生理 解 的 差异 ,从 而 导致 后 续 错误 的 设计 或 实现 ,而 要 消除 
这 些 误解 和 错误 往往 需要 付出 巨大 的 代价 ;由 于 计算 机 技术 和 应 用 发 展 迅 速 ,知识 更 新 周 
期 加 快 , 软 件 开发 人 员 经 常 处 在 变化 之 中 ,不 仅 需要 适应 硬件 更 新 的 变化 ,而 且 还 要 涉及 
日 益 扩 大 的 应 用 领域 问题 研究 ;软件 开发 人 员 所 进行 的 每 一 项 软件 开发 几乎 都 必须 调整 
自身 的 知识 结构 以 适应 新 的 问题 求解 的 需要 ,而 这 种 调整 是 人 所 固有 的 学 习 行为 ,难以 用 
工具 来 代替 。 


4. 解决 途径 


软件 工程 诞生 于 20 世纪 60 年 代 末 期 ,主要 研究 软件 生产 的 客观 规律 性 ,建立 与 系统 
化 软件 生产 有 关 的 概念 .原则 方法、 技术 和 工具 ,指导 和 支持 软件 系统 的 生产 活动 ,以 期 
达到 降低 软件 生产 成 本 \ 改 进 软件 产品 质量 、 提 高 软件 生产 率 的 目标 。 

在 软件 开发 过 程 中 人 们 开始 研制 和 使 用 软件 工具 ,用 以 辅助 进行 软件 项 目 管理 与 技 
术 生产 ,人 们 还 将 软件 生命 周期 各 阶段 使 用 的 软件 工具 有 机 地 集合 成 为 一 个 整体 ,形成 能 
够 连续 支持 软件 开发 与 维护 全 过 程 的 集成 化 软件 支援 环境 ,以 期 从 管理 和 技术 两 方面 解 
决 软件 危机 问题 。 


1.2 软件 开发 


软件 开发 过 程 是 软件 工程 重要 部 分 ,也 是 软件 测试 的 基础 。 软 件 开 发 流程 即 软件 设 
计 思 路 和 方法 的 一 般 过 程 ,包括 设计 软件 的 功能 和 实现 的 算法 和 方法 、 软 件 的 总 体 结构 设 
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计 和 模块 设计 、 编 程 和 调试 ,程序 联 调和 测试 以 及 编写 .提交 程序 ,最 后 达到 用 户 的 满意 。 


1.2.1 软件 开发 过 程 


通常 的 软件 开发 过 程 包括 需求 分 析 、 概 要 设计 、 详 细 设计 、 编 写 代 码 、 软 件 测试 .运行 
和 维护 六 个 阶段 。 


1. 需求 分 析 


系统 分 析 员 向 用 户 初 步 了 解 需求 ,然后 列 出 要 开发 的 系统 的 大 功能 模块 ,每 个 大 功能 
模块 有 哪些 小 功能 模块 。 系 统 分 析 员 进一步 了 解 和 分 析 需 求 ,根据 自己 的 经 验 和 需求 用 
相关 的 工具 做 出 一 份 文档 系统 的 功能 需求 文档 。 系 统 分 析 员 向 用 户 再 次 确认 需求 。 


2. 概要 设计 


开发 者 需要 对 软件 系统 进行 概要 设计 , 即 系统 设计 。 概 要 设计 需要 对 软件 系统 的 设 
计 进 行 考虑 ,包括 系统 的 基本 处 理 流程 .系统 的 组 织 结构 、 模 块 划分 、 功 能 分 配 ,接口 设计 、 
运行 设计 ` 数 据 结 构 设 计 和 出 错 处 理 设计 等 ,为 软件 的 详细 设计 提供 基础 。 

3. 详细 设计 

在 概要 设计 的 基础 上 ,开发 者 需要 进行 软件 系统 的 详细 设计 。 在 详细 设计 中 ,描述 实 
现 具体 模块 所 涉及 的 主要 算法 数据 结构 .类 的 层次 结构 及 调用 关系 ,需要 说 明 软 件 系统 
各 个 层次 中 的 每 一 个 程序 (每 个 模块 或 子 程序 ) 的 设计 考虑 ,以 便 进 行 编码 和 测试 。 应 当 
保证 软件 的 需求 完全 分 配给 整个 软件 。 详 细 设计 应 当 足 够 详细 ,能够 根据 详细 设计 报告 
进行 编码 。 


4. 编写 代码 


在 软件 编码 阶段 ,开发 者 根据 (软件 系统 详细 设计 报告 ) 中 对 数据 结构 .算法 分 析 和 模 
块 实现 等 方面 的 设计 要 求 , 开 始 具体 的 编写 程序 工作 ,分 别 实现 各 模块 的 功能 ,从 而 实现 
对 目标 系统 的 功能 \ 性 能 ,接口 界面 等 方面 的 要 求 。 


5. 软件 测试 


将 测试 编写 好 的 系统 交付 给 用 户 使 用 ,用 户 使 用 后 一 个 一 个 地 确认 每 个 功能 。 软 件 
测试 是 项 目 研 发 中 一 个 相当 重要 的 步骤 ,对 于 一 个 大 型 软件 , 几 个 月 到 1 年 以 上 的 外 部 测 
试 都 是 正常 的 ,因为 永远 都 会 有 不 可 预料 的 问题 存在 。 完 成 测试 后 ,完成 验收 并 完成 最 后 
的 一 些 帮 助 文档 ,整体 项 目 才 算 告 一 段落 ,当然 日 后 少不了 升级 ,修补 等 工作 。 


6. 运行 和 维护 


在 软件 测试 证 明 软 件 达 到 要 求 后 ,软件 开发 者 应 向 用 户 提交 开发 的 目标 安装 程序 , 数 
据 库 的 数据 字典 、 用 户 安装 手册 、 用 户 使 用 指南 、 需 求 报告 .设计 报告 测试 报告 等 双方 合 
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同 约定 的 产物 。 交 给 用 户 使 用 ,用 户 使 用 后 一 个 一 个 地 确认 每 个 功能 ,然后 验收 。 进 入 运 
行 维护 阶段 ,这 个 阶段 可 能 维持 多 年 ,并 且 在 运行 中 可 能 有 多 种 原因 需要 对 软件 进行 修改 
和 打 补 丁 。 


12.2 软件 开发 过 程 模型 


软件 开发 过 程 模型 有 瀑布 模型 .原型 模型 .螺旋 模型 . 增 量 模型 .喷泉 模型 .形式 化 方 
法 ,敏捷 模型 等 很 多 种 ,这 里 介绍 瀑布 模型 .原型 模型 .螺旋 模型 三 种 最 常见 的 模型 。 


1. 瀑布 模型 


温 斯 顿 。 罗 伊 斯 在 1970 年 提出 了 著名 的 瀑布 模型 ,直到 20 世纪 80 年 代 早期 , 它 一 
直 是 唯一 被 广泛 采用 的 软件 开发 模型 。 瀑 布 模型 是 将 软件 生存 周期 的 各 项 活动 规定 为 按 
固定 顺序 而 连接 的 若干 阶段 工作 , 形 如 瀑布 流水 ,最 终 得 到 软件 产品 。 

瀑布 模型 (Waterfall Model) 强 调 系统 开发 应 有 完整 的 周期 ,将 软件 生命 周期 划分 为 
制订 计划 、 需 求 分 析 、` 软 件 设计 、 程 序 编写 .软件 测试 和 和 运行 维护 等 六 个 基本 活动 ,并 且 规 
定 了 它们 自 上 而 下 、 相 互 衔接 的 固定 次 序 ,如 同 瀑布 流水 , 逐 级 下 落 。 瀑 布 模型 是 最 早出 
现 的 软件 开发 模型 ,在 软件 工程 中 占有 重要 的 地 位 , 它 提供 了 软件 开发 的 基本 框架 。 其 过 
程 是 从 上 一 项 活动 接收 该 项 活动 的 工作 对 象 作为 输入 ,利用 这 一 输入 实施 该 项 活动 应 完成 
的 内 容 给 出 该 项 活动 的 工作 成 果 , 并 作为 输出 传 给 下 一 项 活动 。 同 时 评审 该 项 活动 的 实施 ， 
若 确认 , 则 继续 下 一 项 活动 ;否则 返回 前 面 ,甚至 更 前 面 的 活动 。 瀑 布 模型 如 图 1-1 所 示 。 


定义 | [制订 计划 
a 
设计 
п ча 
软件 测试 


维护 N 
运行 维护 
Шы? G 
图 1-1 瀑布 模型 
1) 瀑布 模型 的 优点 


(1) 为 项 目 提供 了 按 阶段 划分 的 检查 点 。 

(2) 当前 一 阶段 完成 后 ,只 需 去 关注 后 续 阶段 。 

(3) 可 在 迭代 模型 中 应 用 瀑布 模型 。 

(4) 它 提供 了 一 个 模板 ,这 个 模板 使 得 分 析 设计、 编码 ,测试 和 支持 的 方法 可 以 在 该 
模板 下 有 一 个 共同 的 指导 。 


2) 瀑布 模型 的 缺点 

(1) 各 个 阶段 的 划分 完全 固定 ,阶段 之 间 产生 大 量 的 文档 , 极 大 地 增加 了 工作 量 。 

D 由 于 开发 模型 是 线性 的 (瀑布 模型 又 称 为 线性 模型 ), 用 户 只 有 等 到 整个 过 程 的 
末期 才能 见 到 开发 成 果 , 从 而 增加 了 开发 风险 。 

(3) 通过 过 多 的 强制 完成 日 期 和 里 程 碑 来 跟踪 各 个 项 目 阶段 。 

(4) 瀑布 模型 的 突出 缺点 是 不 适应 用 户 需 求 的 变化 。 

(5) 早期 的 错误 可 能 要 等 到 开发 后 期 的 测试 阶段 才能 发 现 ,进而 带 来 严重 的 后 果 。 

按照 瀑布 模型 的 阶段 划分 ,软件 测试 可 以 分 为 单元 测试 、 集 成 测试 、 系 统 测试 。 尽 管 
瀑布 模型 招致 了 很 多 批评 ,但 是 它 对 很 多 类 型 的 项 目 而 言 依然 是 有 效 的 ,如 果 正 确 使 用 ， 
可 以 节省 大 量 时 间 和 金钱 。 在 瀑布 模型 中 ,软件 开发 的 各 项 活动 严格 按照 线性 方式 进行 ， 
当前 活动 接受 上 一 项 活动 的 工作 结果 ,实施 完成 所 需 的 工作 内 容 。 当 前 活动 的 工作 结果 
需要 进行 验证 ,如 果 验 证 通过 , 则 该 结果 作为 下 一 项 活动 的 输入 ,继续 进行 下 一 项 活动 , 否 
则 返回 修改 。 同 时 ,瀑布 模型 强调 文档 的 作用 ,并 要 求 每 个 阶段 都 要 仔细 验证 。 但 是 ,这 
种 模型 的 线性 过 程 已 不 再 适合 现代 的 软件 开发 模式 ,几乎 被 业界 抛弃 。 


2. 原型 模型 


原型 模型 是 快速 建立 起 来 的 可 以 计算 机 运行 的 程序 , 它 通过 向 用 户 提供 原型 获取 用 
户 的 反馈 ,使 开发 出 的 软件 能 够 丰 正 反映 用 户 的 需求 。 同 时 ,原型 模型 采用 逐步 求 精 的 方 
法 完善 原型 ,使 得 原型 能 够 快速 开发 ,避免 了 像 瀑布 模型 一 样 在 元 长 的 开发 过 程 中 难以 对 
用 户 的 反馈 作出 快速 的 响应 。 相 对 瀑布 模型 而 言 ,原型 模型 更 符合 人 们 开发 软件 的 习惯 ， 
使 目前 较 流行 的 一 种 实用 软件 模型 。 原 型 模型 如 图 1-2 所 示 。 

原型 模型 的 特点 ， 

а) 开发 人 员 和 用 户 在 原型 上 达成 一 致 。 这 样 一 来 ,可 以 减少 设计 中 的 错误 和 开发 
中 的 风险 ,也 减少 了 对 用 户 培训 的 时 间 , 从 而 提高 系 
统 的 实用 性 、 正 确 性 以 及 用 户 的 满意 程度 。 ут 

(2) 缩短 了 开发 周期 ,加 快 了 工程 进度 。 

(3) 降低 成 本 。 

原型 模型 的 缺点 表现 在 : 当 告诉 用 户 ,还 必须 


改造 原型 


重新 生产 该 产品 时 ,用 户 是 很 难 接受 的 。 这 往往 给 BK 

工程 继续 开展 带 来 不 利 因素 。 W 
而 快速 原型 模型 的 提出 ,可 以 较 好 地 解决 瀑布 EE 

模型 的 局 限 性 ,通过 建立 原型 ,可 以 更 好 地 和 客户 进 pigx] р 

行 沟通 ,解决 对 一 些 模糊 需求 的 淤 清 ,并 且 对 需求 的 | 原型 аты 

变化 有 较 强 的 适应 能 力 。 原 型 模型 可 以 减少 技术 、 

应 用 的 风险 ,缩短 开发 时 间 ,减少 费用 ,提高 生产 率 ， 

通过 实际 运行 原型 ,提供 了 用 户 直 接 评价 系统 的 方 

法 ,促使 用 户主 动 参与 开发 活动 ,加 强 了 信息 的 反 -> 


馈 ,促进 各 类 人 员 的 协调 交流 ,减少 误解 ,能 够 适应 
需求 的 变化 ,最 终 有 效 提高 软件 系统 的 质量 。 1-2 ”原型 模型 
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但 是 ,开发 者 为 了 使 一 个 原型 快速 运行 起 来 ,往往 在 实现 过 程 中 采用 这 种 手段 。 不 宜 
利用 原型 系统 作为 最 终 产 品 。 采 用 原型 模型 开发 系统 ,用 户 和 开发 者 必须 达成 一 致 ,原型 
被 建造 仅仅 是 用 户 用 来 定义 需求 ,之 后 便 部 分 或 全 部 抛弃 ,最 终 的 软件 是 要 充分 考虑 了 质 
量 和 可 维护 性 等 方面 之 后 才 被 开发 。 


3. 螺旋 模型 


EF -e IA Barry Boehm)1988 年 正式 发 表 了 软件 系统 开发 的 螺旋 模型 , 它 将 瀑布 
模型 和 快速 原型 模型 结合 起 来 ,强调 了 其 他 模型 所 忽视 的 风险 分 析 , 特 别 适 合 于 大 型 复杂 
的 系统 。 螺 旋 模 型 (Spiral Model) 采 用 一 种 周期 性 的 方法 来 进行 系统 开发 。 这 会 导致 开 
发 出 众多 的 中 间 版 本 。 使 用 它 的 项 目 经 理 在 早期 就 能 够 为 客户 实证 某 些 概念 。 螺 旋 模 型 
如 图 1-3 所 示 。 


制订 计划 
决定 目标 
方案 限制 


需求 计划 ,| 
-生存 其 
计划 
开发 计划 
组 装 测试 


客户 评估 


图 1-3 螺旋 模型 


这 种 模型 的 每 一 个 周期 都 包括 制订 计划 、 风 险 分 析 、 实 施工 程 和 客户 评估 4 个 阶段 ， 
由 这 4 个 阶段 进行 迭代 。 软 件 开发 过 程 每 迭代 一 次 ,软件 开发 又 前 进 一 个 层次 。 螺 旋 模 
型 沿 着 螺 线 进行 若干 次 迭代 ,上 图 中 的 四 个 象限 代表 了 以 下 活动 。 

(1) 制订 计划 : 确定 软件 目标 , 选 定 实施 方案 ,和 弄 清 项 目 开发 的 限制 条 件 。 

(2) 风险 分 析 : 分 析 评 估 所 选 方案 ,考虑 如 何 识别 和 消除 风险 。 

(3) 实施 工程 : 实施 软件 开发 和 验证 。 


(4) 客户 评估 : 评价 开发 工作 ,提出 修正 建议 ,制订 下 一 步 计 划 。 

螺旋 模型 基本 做 法 是 在 “瀑布 模型 的 每 一 个 开发 阶段 前 引入 一 个 非常 严格 的 风险 识 
别 、 风 险 分 析 和 风险 控制 , 它 把 软件 项 目 分 解 成 一 个 个 小 项 目 。 每 个 小 项 目 都 标识 一 个 或 
多 个 主要 风险 ,直到 所 有 的 主要 风险 因素 都 被 确定 。 

螺旋 模型 强调 风险 分 析 ,使 得 开发 人 员 和 用 户 对 每 个 演化 层 出 现 的 风险 有 所 了 解 , 继 
而 做 出 应 有 的 反应 ,因此 特别 适用 于 庞大 、 复 杂 并 具有 高 风险 的 系统 。 对 于 这 些 系 统 , 风 
险 是 软件 开发 不 可 忽视 ,潜在 的 不 利 因素 , 它 可 能 在 不 同 程度 上 损害 软件 开发 过 程 ,影响 
软件 产品 的 质量 。 减 小 软件 风险 的 目标 是 在 造成 危害 之 前 ,及 时 对 风险 进行 识别 及 分 析 ， 
决定 采取 何 种 对 策 , 进 而 消除 或 减少 风险 的 损害 。 

螺旋 模型 由 风险 驱动 ,强调 可 选 方案 和 约束 条 件 从 而 支持 软件 的 重用 ,有 助 于 将 软件 
质量 作为 特殊 目标 融入 产品 开发 之 中 。 

螺旋 模型 的 优点 : 

(1) 设计 上 的 灵活 性 ,可 以 在 项 目的 各 个 阶段 进行 变更 。 

(2) 以 小 的 分 段 来 构建 大 型 系统 ,使 成 本 计算 变 得 简单 容易 。 

(3) 客户 始终 参与 每 个 阶段 的 开发 ,保证 了 项 目 不 偏 离 正 确 方向 以 及 项 目的 可 控 性 。 

(4) 随 着 项 目 推进 ,客户 始终 掌握 项 目的 最 新 信息 ,从 而 能 够 和 管理 层 有 效 地 交互 。 

(5) 客户 认可 这 种 公司 内 部 的 开发 方式 带 来 的 良好 的 沟通 和 高 质量 的 产品 。 

螺旋 模型 的 缺点 : 

(1) 采用 螺旋 模型 需要 具有 相当 丰富 的 风险 评估 经 验 和 专门 知识 ,在 风险 较 大 的 项 
目 开发 中 ,如 果 未 能 及 时 标识 风险 ,势必 造成 重大 损失 。 

(2) 过 多 的 迭代 次 数 会 增加 开发 成 本 ,延迟 提交 时 间 。 

螺旋 模型 很 大 程度 上 是 一 种 风险 驱动 的 方法 体系 ,因为 在 每 个 阶段 之 前 及 经 常 发 生 
的 循环 之 前 ,都 必须 首先 进行 风险 评估 。 在 实践 中 ,螺旋 法 技术 和 流程 变 得 更 为 简单 ,但 
是 对 于 项 目 管理 人 员 的 要 求 会 比较 高 。 


1.3 软件 缺陷 
1.3.1 软件 缺陷 概述 


缺陷 的 英文 是 Bug。Bug 这 个 词 相 信 所 有 的 计算 机 人 员 都 不 陌生 。 下 面 介绍 一 下 它 
的 起 源 。1945 年 9 月 9 日 ,下 午 三 点 。 哈 珀 中 尉 正 领 着 她 的 小 组 构造 一 个 称 为 “马克 二 
型 "的 计算 机 。 这 还 不 是 一 个 完全 的 电子 计算 机 , 它 使 用 了 大 量 的 继电器 ,是 一 种 电子 机 
械 装置 。 第 二 次 世界 大 战 还 没有 结束 。 哈 珀 的 小 组 夜以继日 地 工作 。 机 房 是 一 间 第 一 次 
世界 大 战 时 建造 的 老 建筑 。 那 是 一 个 炎热 的 夏天 ,房间 没有 空调 ,所 有 窗户 都 敞开 散热 。 
突然 ,马克 二 型 死机 了 。 技 术 人 员 试 了 很 多 办 法 ,最 后 定位 到 第 70 号 继电器 出 错 。 哈 珀 
观察 这 个 出 错 的 继电器 ,发 现 一 只 飞 蛾 身 在 中 间 . 已 经 被 继电器 电 死 。 她 小 心地 用 久 子 将 
蛾 子 夹 出 来 ,用 透明 胶布 帖 到 记录 本 中 ,并 注 明 “ 第 一 个 发 现 虫 子 的 实例 ”。 从 此 以 后 ,人 
们 将 计算 机 错误 戏称 为 虫子 (Bug) ,而 把 找寻 错误 的 工作 称 为 Debug, 就 是 捉 虫子 的 
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所 谓 软 件 缺 陷 , 即 为 计算 机 软件 或 程序 中 存在 的 某 种 破坏 正常 运行 能 力 的 问题 、 错 
误 ,或 者 隐藏 的 功能 缺陷 。 缺 陷 的 存在 会 导致 软件 产品 在 某 种 程度 上 不 能 满足 用 户 的 需 
要 。IEEE 729—1983 对 缺陷 有 一 个 标准 的 定义 : 从 产品 内 部 看 ,缺陷 是 软件 产品 开发 或 
维护 过 程 中 存在 的 错误 .毛病 等 各 种 问题 ;从 产品 外 部 看 ,缺陷 是 系统 所 需要 实现 的 某 种 
功能 的 失效 或 违背 。 在 软件 开发 生命 周期 的 后 期 ,修复 检测 到 的 软件 错误 的 成 本 较 高 。 
已 发 现 的 缺陷 数 和 残存 的 缺陷 数 的 关系 如 图 1-4 所 示 。 
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已 发 现 的 缺陷 数 
图 1-4 已 发 现 的 缺陷 数 和 残存 的 缺陷 数 的 关系 


在 软件 开发 的 过 程 中 ,软件 缺陷 的 产生 是 不 可 避免 的 ,造成 软件 缺陷 的 主要 原因 : 
1. 来 自 软 件 本 身 


(1) 需求 不 清晰 ,导致 设计 目标 偏离 客户 的 需求 ,从 而 引起 功能 或 产品 特征 上 的 
缺陷 。 

(2) 系统 结构 非常 复杂 ,而 又 无 法 设计 成 一 个 很 好 的 层次 结构 或 组 件 结构 ,结果 导致 
意 想不到 的 问题 或 系统 维护 、 扩 充 上 的 困难 ;即使 是 设计 成 良好 的 面向 对 象 的 系统 ,由 于 
对 象 . 类 太 多 ,也 很 难 完成 对 各 种 对 象 . 类 相互 作用 的 组 合 测试 , 会 隐藏 着 一 些 参 数 传递 、 
方法 调用 .对象 状态 变化 等 方面 问题 。 

(3) 对 程序 逻辑 路 径 或 数据 范围 的 边界 考虑 不 够 周全 , 漏 掉 某 些 边界 条 件 ,造成 容量 
或 边界 错误 。 

Са) 对 一 些 实时 应 用 ,要 进行 精心 设计 和 技术 处 理 , 保 证 精确 的 时 间 同 步 ,否则 容易 
引起 时 间 上 不 协调 ,不 一 致 性 带 来 的 问题 。 

(5) 没有 考虑 系统 崩溃 后 的 自我 恢复 或 数据 的 异地 备份 ,灾难 性 恢复 等 问题 ,从 而 存 
在 系统 安全 性 .可靠 性 的 隐患 。 

(6) 系统 运行 环境 的 复杂 ,不仅 用 户 使 用 的 计算 机 环境 千变万化 ,包括 用 户 的 各 种 操 
作 方 式 或 各 种 不 同 的 输入 数据 ,容易 引起 一 些 特定 用 户 环境 下 的 问题 ;在 系统 实际 应 用 
中 ,数据 量 很 大 ,从 而 会 引起 强度 或 负载 问题 。 

Ст) 由 于 通信 端口 多 、 存 取 和 加 密 手 段 的 矛盾 性 等 ,会 造成 系统 的 安全 性 或 适用 性 等 
问题 。 

(8) 新 技术 的 采用 ,可 能 涉及 技术 或 系统 兼容 的 问题 ,事先 没有 考虑 到 。 


2. 来 自 团 队 工作 


ян 
(1) 系统 需求 分 析 时 对 客户 的 需求 理解 不 清楚 ,或 者 和 用 户 的 沟通 存在 一 些 困 难 。 


D 不 同 阶段 的 开发 人 员 相 互 理解 不 一 致 。 例 如 ,软件 设计 人 员 对 需求 分 析 的 理解 
有 偏差 ,编程 人 员 对 系统 设计 规格 说 明 书 某 些 内 容重 视 不 够 或 存在 误解 。 

(3) 对 于 设计 或 编程 上 的 一 些 假定 或 依赖 性 ,相关 人 员 没 有 充分 沟通 。 
3. 来 自 技术 问题 


(4) 项 目 组 成 员 技术 水 平 参 差 不 齐 、 新 员工 较 多 或 培训 不 够 等 原因 也 容易 引起 问题 。 


(1) 算法 错误 : 在 给 定 条 件 下 没 能 给 出 正确 或 准确 的 结果 。 
程序 ,只 能 在 测试 运行 时 发 现 。 


(2) 语法 错误 : 对 于 编译 性 语言 程序 ,编译 器 可 以 发 现 这 类 问题 ;但 对 于 解释 性 语言 
(3) 计算 和 精度 问题 : 计算 的 结果 没有 满足 所 需要 的 精度 。 


(4) 系统 结构 不 合理 .算法 选择 不 科学 ,造成 系统 性 能 低下 。 
(5) 接口 参数 传递 不 匹配 ,导致 模块 集成 出 现 问题 。 
4. 项 目 管理 的 问题 


(1) 缺乏 质量 文化 ,不 重视 质量 计划 ,对 质量 资源、 任务 .成 本 等 的 平衡 性 把 握 不 好 ， 
容易 挤 掉 需 求 分 析 .评审 .测试 等 时 间 ,遗留 的 缺陷 会 比较 多 。 

(2) 系统 分 析 时 对 客户 的 需求 不 是 十 分 清楚 ,或 者 和 用 户 的 沟通 存在 一 些 困难 。 
成 太 大 的 压力 ,引起 一 些 人 为 的 错误 。 

问题 


(3) 开发 周期 短 ,需求 分 析 、 设 计 , 编 程 、 测 试 等 各 项 工作 不 能 完全 按照 定义 好 的 流程 


来 进行 ,工作 不 够 充分 ,结果 也 就 不 完整 .不 准确 ,错误 较 多 ;周期 短 , 还 给 各 类 开发 人 员 造 
(5) 文档 不 完善 ,风险 估计 不 足 等 。 


(4) 开发 流程 不 够 完善 ,存在 太 多 的 随机 性 和 缺乏 严谨 的 内 审 或 评审 机 制 ,容易 产生 
1.3.2 软件 缺陷 的 严重 性 和 优先 级 


1. 什么 是 缺陷 的 严重 性 和 优先 级 
严重 性 就 是 软件 缺陷 对 软件 质量 的 破坏 程度 , 即 此 软件 缺陷 的 存在 将 对 软件 的 功能 
和 性 能 产生 怎样 的 影响 。 

在 软件 测试 中 ,软件 缺陷 的 严重 性 的 判断 应 该 从 软件 最 终 用 户 的 观点 做 出 判断 , 即 判 
些 缺 陷 可 以 稍 后 修正 。 


断 缺陷 的 严重 性 要 为 用 户 考虑 ,考虑 缺陷 对 用 户 使 用 造成 的 恶劣 后 果 的 严重 性 。 


优先 级 是 表示 处 理 和 修正 软件 缺陷 的 先后 顺序 的 指标 , 即 哪些 缺陷 需要 优先 修正 , 哪 
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确定 软件 缺陷 优先 级 ,主要 是 站 在 软件 开发 工程 师 的 角度 考虑 问题 ,因为 缺陷 的 修正 
顺序 是 个 复杂 的 过 程 ,有 些 不 是 纯粹 技术 问题 ,而 且 开 发 人 员 更 熟悉 软件 代码 ,能够 比 测 
试 工程 师 更 清楚 修正 缺陷 的 难度 和 风险 。 


2. 缺陷 的 严重 性 和 优先 级 的 关系 


缺陷 的 严重 性 和 优先 级 是 含义 不 同 但 相互 联系 密切 的 两 个 概念 。 它 们 都 从 不 同 的 侧 
面 描述 了 软件 缺陷 对 软件 质量 和 最 终 用 户 的 影响 程度 和 处 理 方式 。 

一 般 地 ,严重 性 程度 高 的 软件 缺陷 具有 和 较 高 的 优先 级 。 严 重 性 高 说 明 缺陷 对 软件 造 
成 的 质量 危害 性 大 ,需要 优先 处 理 , 而 不 严重 的 缺陷 可 能 只 是 软件 不 太 尽善尽美 ,可 以 稍 
后 处 理 。 

但 是 ,严重 性 和 优先 级 并 不 总 是 一 一 对 应 。 有 了 时候 严重 性 高 的 软件 缺陷 ,优先 级 不 一 
定 高 ,甚至 不 需要 处 理 , 而 一 些 严重 性 低 的 缺陷 却 需要 及 时 处 理 ,具有 和 较 高 的 优先 级 。 

修正 软件 缺陷 不 是 一 件 纯 技术 问题 ,有 时 需要 综合 考虑 市 场 发 布 和 质量 风险 等 问题 。 
例如 ,如 果 某 个 严重 的 软件 缺陷 只 在 非常 极端 的 条 件 下 产生 , 则 没有 必要 马上 解决 。 另 
外 ,如 果 修 正 一 个 软件 缺陷 ,需要 重新 修改 软件 的 整体 架构 ,可 能 会 产生 更 多 潜在 的 缺陷 ， 
而 且 软 件 由 于 市 场 的 压力 必须 尽快 发 布 ,此 时 即使 缺陷 的 严重 性 很 高 ,是 否 需 要 修正 , 需 
要 全 盘 考 虑 。 

另 一 方面 ,如 果 软 件 缺陷 的 严重 性 很 低 ,例如 ,界面 单词 拼写 错误 ,但 是 如 果 是 软件 名 
称 或 公司 名 称 的 拼写 错误 , 则 必须 尽快 修正 ,因为 这 关系 到 软件 和 公司 的 市 场 形象 。 


3. 处 理 缺 陷 的 严重 性 和 优先 级 的 常见 错误 


(1) 将 比较 轻微 的 缺陷 报告 成 较 高 级 别 的 缺陷 和 高 优先 级 ,夸大 缺陷 的 严重 程度 ,经 
常 给 人 的 错觉 ,会 影响 软件 质量 的 正确 评估 ,也 耗费 开发 人 员 辨别 和 处 理 缺 陷 的 时 间 。 

(2) 将 很 严重 的 缺陷 报告 成 轻微 缺陷 和 低 优先 级 ,这 样 可 能 掩盖 了 很 多 严重 的 缺陷 。 
如 果 在 项 目 发 布 前 ,发 现 还 有 很 多 由 于 不 正确 分 配 优 先 级 造成 的 严重 缺陷 ,将 需要 投入 很 
多 人 力 和 时 间 进 行 修正 ,影响 软件 的 正常 发 布 。 或 者 这 些 严重 的 缺陷 漏 掉 , 随 软件 一 起 发 
布 出 去 ,影响 软件 的 质量 和 用 户 的 使 用 信心 。 

因此 ,正确 处 理 和 区 分 缺陷 的 严重 性 和 优先 级 ,是 软件 测试 人 员 和 开发 人 员 以 及 全 体 
项 目 组 人 员 的 一 件 大 事 。 处 理 严重 性 和 优先 级 ,既是 一 种 经 验 或 技术 ,也 是 保证 软件 质量 
的 重要 环节 ,应 该 引起 足够 的 重视 。 


4. 如 何 表示 缺陷 的 严重 性 和 优先 级 


缺陷 的 严重 性 和 优先 级 通常 按照 级 别 划分 ,各 个 公司 和 不 同 项 目的 具体 表示 方式 
有 所 不 同 。 为 了 尽量 准确 的 表示 缺陷 信息 ,通常 将 缺陷 的 严重 性 和 优先 级 分 成 四 级 。 
如 果 分 级 超过 四 级 , 则 造成 分 类 和 判断 尺度 的 复杂 程度 ,而 少 于 四 级 ,精确 性 有 时 不 能 
具体 的 表示 方法 可 以 使 用 数字 表示 ,也 可 以 使 用 文字 表示 ,还 可 以 数字 和 文字 综合 表 
示 。 使 用 数字 表示 通常 按照 从 高 到 低 或 从 低 到 高 的 顺序 ,需要 软件 测试 前 达成 一 致 。 例 
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,使 用 数字 1、2、3、4 分 别 表示 轻微 .一 般 、 较 严重 和 非常 严重 的 严重 性 。 对 于 优先 级 而 
1,2,3,4 可 以 分 别 表示 低 优先 级 一般、 较 高 优先 级 和 最 高 优先 级 。 


5. 如 何 确 定 缺陷 的 严重 性 和 优先 级 


通常 由 软件 测试 人 员 确 定 缺 陷 的 严重 性 ,由 软件 开发 人 员 确 定 优先 级 较为 适当 。 但 
是 ,实际 测试 中 ,通常 都 是 由 软件 测试 人 员 在 缺陷 报告 中 同时 确定 严重 性 和 优先 级 。 

确定 缺陷 的 严重 性 和 优先 级 要 全 面 了 解 和 深刻 体会 缺陷 的 特征 ,从 用 户 和 开发 人 员 
以 及 市 场 的 因素 综合 考虑 。 通 常 功能 性 的 缺陷 较为 严重 ,具有 和 较 高 的 优先 级 ,而 软件 界面 
类 缺陷 的 严重 性 一 般 较 低 ,优先 级 也 较 低 。 

对 于 缺陷 的 严重 性 ,如 果 分 为 四 级 , 则 可 以 参考 下 面 的 方法 确定 。 

(1) 非常 严重 的 致命 性 缺陷 : 例如 ,软件 的 意外 退出 甚至 操作 系统 崩溃 ,造成 数据 丢 

(2) 较 严重 的 缺陷 : 例如 ,软件 的 某 个 菜单 不 起 作用 或 者 产生 错误 的 结果 ,主要 功能 
部 分 丧失 ,次 要 功能 全 部 丧失 ,或 致命 的 错误 声明 。 

(3) 一 般 缺 陷 : 例如 ,本 地 化 软件 的 某 些 字符 没有 翻译 或 者 翻译 不 准确 、 用 户 界面 差 
和 操作 时 间 长 等 。 

СА) 轻微 的 缺陷 : 例如 ,一 些小 问题 如 : 某 个 控件 没有 对 齐 , 某 个 标点 符号 丢失 ,有 个 
别 错别字 ,文字 排版 不 整齐 等 ,对 功能 几乎 没有 影响 ,软件 产品 仍 可 使 用 。 

对 于 缺陷 的 优先 性 ,如 果 分 为 四 级 , 则 可 以 参考 下 面 的 方法 确定 。 

(1) 最 高 优先 级 : 例如 ,软件 的 主要 功能 错误 或 者 造成 软件 崩溃 ,数据 丢失 的 缺陷 。 

(2) 较 高 优先 级 : 例如 ,影响 软件 功能 和 性 能 的 一 般 缺 陷 。 

(3) 一 般 优先 级 : 例如 ,本 地 化 软件 的 某 些 字符 没有 翻译 或 者 翻译 不 准确 的 缺陷 。 

Са) 低 优先 级 : 例如 ,对 软件 的 质量 影响 非常 轻微 或 出 现 几率 很 低 的 缺陷 。 


6. 注意 事项 


(1) 软件 测试 要 规范 ,在 使 用 软件 缺陷 管理 数据 库 进行 缺陷 报告 和 处 理 时 ,需要 在 测 
试 项 目 开 始 前 对 全 体 测试 人 员 和 开发 人 员 进 行 培训 ,对 统一 规定 缺陷 严重 性 和 优先 级 的 
表示 和 划分 方法 。 

(2) 在 测试 项 目 进 行 过 程 中 和 项 目 接收 后 ,充分 利用 统计 功能 统计 缺陷 的 严重 性 , 确 
定 软件 模块 的 开发 质量 ,评估 软件 项 目 实施 进度 。 统 计 优 先 级 的 分 布 情况 ,控制 开发 进 
FE ,使 开发 按照 项 目 尽 快 进行 ,有 效 处 理 缺 陷 , 降 低 风险 和 成 本 。 

(3) 为 了 报告 缺陷 的 严重 性 和 优先 级 的 一 致 性 ,质量 保证 人 员 需 要 经 常 检查 测试 和 
开发 人 员 对 于 这 两 个 指标 的 分 配 和 处 理 情 况 ,发 现 问题 ,及 时 反馈 给 项 目 负责 人 ,及 时 
解决 。 


щі s 


13.3 软件 缺陷 分 类 


从 软件 测试 观点 出 发 ,软件 缺陷 可 分 为 以 下 几 类 。 


绪 


论 
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1. 功能 缺陷 


(1) 规格 说 明 书 缺陷 : 规格 说 明 书 可 能 不 完全 ,有 二 义 性 或 自身 矛盾 。 另 外 ,在 设计 
过 程 中 可 能 修改 功能 ,如 果 不 能 紧 跟 这 种 变化 并 及 时 修改 规格 说 明 书 , 则 产生 规格 说 明 书 
错误 。 

(2) 功能 缺陷 : 程序 实现 的 功能 与 用 户 要 求 的 不 一 致 。 这 常常 是 由 于 规格 说 明 书 包 
含 错误 的 功能 、 多 余 的 功能 或 遗漏 的 功能 所 致 。 在 发 现 和 改正 这 些 缺 陷 的 过 程 中 又 可 能 
引入 新 的 缺陷 。 

СЗ) 测试 缺陷 : 软件 测试 的 设计 与 实施 发 生 错 误 。 特别 是 系统 级 的 功能 测试 ,要 求 
复杂 的 测试 环境 和 数据 库 支持 ,还 需要 对 测试 进行 脚本 编写 。 因 此 软件 测试 自身 也 可 能 
发 生 错 误 。 另 外 ,如 果 测 试 人 员 对 系统 缺乏 了 解 ,或 对 规格 说 明 书 做 了 错误 的 解释 ,也 会 
发 生 许多 错误 。 

(4) 测试 标准 引起 的 缺陷 : 对 软件 测试 的 标准 要 选择 适当 , 若 测 试 标准 太 复 杂 , 则 导 
致 测试 过 程 出 错 的 可 能 就 大 。 


2. 系统 缺陷 


(1) 外 部 接口 缺陷 : 外 部 接口 是 指 如 终端 .打印 机 、 通 信 线 路 等 系统 与 外 部 环境 通信 
的 手段 。 所 有 外 部 接口 之 间 、 人 与 机 器 之 间 的 通信 都 使 用 形式 的 或 非 形式 的 专门 协议 。 
如 果 协 议 有 错 ,或 太 复杂 难以 理解 ,致使 在 使 用 中 出 错 。 此 外 ,还 包括 对 输入 输出 格式 错 
误 理解 ,对 输入 数据 不 合理 的 容错 等 。 

(2) 内 部 接口 缺陷 : 内 部 接口 是 指 程序 内 部 子 系统 或 模块 之 间 的 联系 。 它 所 发 生 的 
缺陷 与 外 部 接口 相同 ,只 是 与 程序 内 实现 的 细节 有 关 , 如 设计 协议 错 、 输 入 输出 格式 错 、 数 
据 保护 不 可 靠 、 子 程序 访问 错 等 。 

(3) 硬件 结构 缺陷 : 与 硬件 结构 有 关 的 软件 缺陷 在 于 不 能 正确 的 理解 硬件 如 何 工 
作 。 如 忽视 或 错误 地 理解 分 页 机 构 、 地 址 生成 、 通 道 容量 、1/O 指令 、 中 断 处 理 、 设 备 初始 
化 和 启动 等 而 导致 的 出 错 。 

(4) 操作 系统 缺陷 : 与 操作 系统 有 关 的 软件 缺陷 在 于 不 了 解 操 作 系 统 的 工作 机 制 而 
导致 出 错 。 当 然 ,操作 系统 本 身 也 有 缺陷 .但 是 一 般 用 户 很 难 发 现 这 种 缺陷 。 

(5) 软件 结构 缺陷 : 由 于 软件 结构 不 合理 而 产生 的 缺陷 。 这 种 缺陷 通常 与 系统 的 负 
载 有 关 , 而 且 往往 在 系统 满载 时 才 出 现 。 如 错误 地 设置 局 部 参数 或 全 局 参数 ;错误 地 假定 
寄存 器 与 存储 器 单元 初始 化 了 ;错误 地 假定 被 调用 子 程序 常 驻 内 存 或 非常 驻 内 存 等 ,都 将 
导致 软件 出 错 。 

(6) 控制 与 顺序 缺陷 : 如 忽视 了 时 间 因 素 而 破坏 了 事件 的 顺序 ;等 待 一 个 不 可 能 发 
生 的 条 件 ; 漏 掉 先 决 条 件 ;规定 错误 的 优先 级 或 程序 状态 ; 漏 掉 处 理 步骤 ;存在 不 正确 的 处 
理 步骤 或 多 余 的 处 理 步骤 等 。 

Ст) 资源 管理 缺陷 : 由 于 不 正确 地 使 用 资源 而 产生 的 缺陷 。 如 使 用 未 经 获准 的 资 
ІН ,使 用 后 未 释放 资源 ,资源 死 锁 ,把 资源 链接 到 错误 的 队列 中 等 。 


3. 加 工 缺 陷 


(1) 算法 与 操作 缺陷 : 是 指 在 算术 运算 、 函 数 求 值 和 一 般 操作 过 程 中 发 生 的 缺陷 。 
如 数据 类 型 转换 错 , 不 正确 地 使 用 关系 运算 符 , 不 正确 地 使 用 整数 与 浮 点 数 做 比较 等 。 

(2) 初始 化 缺陷 : 如 忘记 初始 化 工作 区 ,忘记 初始 化 寄存 器 和 数据 区 ;错误 地 对 循环 
控制 变量 赋 初 值 ;用 不 正确 的 格式 .数据 或 类 型 进行 初始 化 等 。 

(3) 控制 和 次 序 缺 陷 : 与 系统 级 同名 缺陷 相 比 , 它 是 局 部 缺陷 。 如 遗漏 路 径 、 不 可 达 
到 的 代码 ,不 符合 语法 的 循环 嵌 套 、 循 环 返回 和 终止 的 条 件 不 正确 、 漏 掉 处 理 步 又 或 处 理 
步骤 有 错 等 。 


4. 代码 缺陷 


包括 数据 说 明 错 、 数 据 使 用 错 、 计 算 错 、 比 较 错 、 控 制 流 错 、 界 面 错 、 输 入 输出 错 及 其 他 
错误 。 

一 般 情况 ,规格 说 明 书 是 软件 缺陷 出 现 最 多 的 地 方 ,其 原因 是 程序 编写 错误 、 文 档 和 
其 他 错误 。 排 在 产品 规格 说 明 书 之 后 的 是 设计 ,编程 排 在 第 三 位 。 在 许多 人 印象 中 ,软件 
测试 主要 是 找 程 序 代码 中 的 错误 ,这 是 一 个 认识 的 误区 。 


1.3.4 预防 和 修复 软件 缺陷 


1. 预防 软件 缺陷 


预防 软件 缺陷 就 是 把 缺陷 消灭 在 萌芽 状态 ,就 是 能 在 缺陷 还 没 产 生出 来 就 已 经 被 扼 
杀 了 ,这 也 是 软件 测试 者 所 追求 的 最 高 境界 。 一 般 的 软件 测试 属于 后 来 弥补 型 ,产生 Bug 
之 后 再 来 修改 ,但 是 Bug 发 现 越 晚 ,修改 掉 花 的 代价 就 越 大 ,所 以 软件 缺陷 预防 技术 就 是 
项 目 生命 周期 的 早期 消灭 Bug。 一 般 常用 的 缺陷 预防 有 几 个 阶段 : 需求 阶段 ,设计 阶段 、 
编码 阶段 。 

在 需求 阶段 ,最 重要 的 事情 是 需求 验证 。 一 般 验 证 的 几 个 大 项 是 ,功能 是 否 完整 ,是 
否 考虑 性 能 ,有 没有 模糊 需求 ,有 没有 考虑 安全 性 ,有 没有 元 余 和 错误 的 需求 ,需求 是 不 是 
过 于 苛刻 ,需求 是 不 是 矛盾 等 方面 。 一 般 常 用 的 方法 是 列 出 需求 检查 表 , 并 进一步 执行 需 
求 /测试 矩阵 。 

设计 阶段 ,这 个 阶段 主要 通过 技术 评审 测试 逻辑 设计 。 常 用 比较 规范 的 作法 是 建立 
过 程 /数据 矩阵 ,把 过 程 影射 到 实体 ,把 整个 程序 的 数据 的 生命 周期 (建立 ,更 新 . 读 取 、 删 
除 ) 反 映 出 来 。 

编码 阶段 ,这 个 阶段 预防 措施 主要 有 统一 编码 规范 .代码 评审 .单元 测试 。 统 一 代码 
规范 一 般 是 开发 经 理 统一 要 求 ,代码 评审 则 是 开发 小 组 成 员 互相 评审 或 者 开发 小 组 长 进 
行 评 审 , 最 后 也 是 最 重要 的 则 是 单元 测试 ,就 是 一 般 说 的 白 盒 测试 。 
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2. 修复 软件 缺陷 


软件 测试 原则 总 是 说 问题 发 现 越 早 越 好 ,发 现 缺陷 后 要 尽快 修复 。 其 原因 在 于 错误 
并 不 只 是 在 编程 阶段 产生 ,需求 和 设计 阶段 同样 会 产生 错误 。 也 许 一 开始 ,只 是 一 个 很 小 
范围 内 的 错误 ,但 随 着 产品 开发 工作 的 进行 ,小 错误 会 扩散 成 大 错误 ,为 了 修改 后 期 的 错 
误 所 做 的 工作 要 大 得 多 , 即 越 到 后 来 往 前 返工 也 越 远 。 如 果 错 误 不 能 及 早 发 现 , 那 只 可 能 
造成 越 来 越 严 重 的 后 果 。 缺 陷 发 现 或 解决 得 越 迟 ,成 本 就 越 高 。 

平均 而 言 ,如 果 在 需求 阶段 修正 一 个 错误 的 代价 是 1 ,那么 ,在 设计 阶段 就 是 它 的 3 一 
6 倍 , 在 编程 阶段 是 它 的 10 倍 ,在 内 部 测试 阶段 是 它 的 20 一 40 倍 , 在 外 部 测试 阶段 是 它 
的 30 一 70 倍 , 而 到 了 产品 发 布 出 去 时 ,这 个 数字 就 是 40 一 1000 倍 , 修 正 错 误 的 代价 不 是 
随时 间 线 性 增长 ,而 几乎 是 呈 指 数 增长 的 。 软 件 缺 陷 的 修复 代价 如 图 1-5 所 示 。 
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需求 阶段 设计 阶段 ”编程 阶段 ”测试 阶段 “发布 阶段 
图 1-5 软件 缺陷 的 修复 代价 
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З. 处 理 软件 缺陷 要 遵循 的 两 个 原则 


处 理 软件 缺陷 要 遵循 的 两 个 原则 : 2/8 原则 和 АВС 法 则 。 

1) 2/8 原则 

做 事情 必须 分 清 轻 重 缓急 。 最 糟糕 的 是 什么 事 都 做 ,这 必 将 一 事 无 成 。80% 的 有 效 
工作 往往 是 在 20% 的 时 间 内 完成 的 ,而 20% 的 工作 是 在 80% 的 时 间 内 完成 的 。 因 此 ,为 
了 提高 测试 质量 ,必须 清晰 地 认识 到 哪些 缺陷 是 最 重要 的 ,哪些 缺陷 是 最 关键 的 。 不 要 捡 
了 芝麻 , 却 丢 了 西瓜 。 所 以 ,只 有 抓 住 了 重要 的 关键 缺陷 ,测试 效果 才能 产生 最 大 的 效益 ， 
这 也 是 第 一 个 原则 , 即 分 清 轻重 缓急 ,把 测试 活动 用 在 最 有 生产 力 的 事情 上 。 

2) ABC 法 则 

古人 云 : 事 有 先后 ,用 有 缓急 。 测 试 工作 其 实 也 是 如 此 ,分 清 缺 陷 的 轻重 缓急 ,不 但 
处 理 起 来 井井有条 ,完成 后 的 效果 也 是 不 同 凡响 。 因 此 ,在 测试 工作 中 要 时 时 记 住 一 点 ， 
手边 的 缺陷 并 不 一 定 就 具有 第 一 优先 处 理 的 重要 性 。 只 有 正确 的 判断 , 才 可 将 测试 活动 
效率 增加 数 倍 。 

ABC 法 则 是 设 定 缺陷 优先 顺序 重要 工具 之 一 。 这 ABC 工具 的 关键 点 在 于 根据 缺陷 
的 重要 程度 决定 优先 顺序 , 按 需 求 目标 进行 量化 规划 。 把 A 类 缺陷 作为 测试 最 重要 的 最 
有 价值 的 最 关键 的 缺陷 ,并 保证 首先 把 A 类 缺陷 先 处 理 。 其 次 是 B 类 ,然后 是 C 类 ,然后 
是 其 他 缺陷 ,还 有 一 些 不 紧急 不 重要 的 缺陷 根本 没有 必要 去 做 。 
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1.3.5 软件 缺陷 案例 


一 些 软件 缺陷 的 案例 带 来 的 损失 是 巨大 的 ,有 的 甚至 导致 了 人 员 伤 亡 。 以 下 这 些 案 
例 都 是 非常 著名 的 案例 。 


1. 2008 ЕСЕН ЖЫНЫ 


2008 北京 奥运 会 售票 系统 刚 开始 运行 不 久 , 于 2007 年 10 月 30 HEF 11 Йя. 
北京 奥运 会 的 指定 独家 票务 供应 商 一 一 北京 歌华 特 玛 捷 票 务 有 限 公 司 成 立 于 2006 年 9 
月 ,由 美国 特 玛 捷 公司 、 中 体 产 业 股 份 有 限 公 司 及 北京 歌华 文化 发 展 集团 三 家 出 资 构 建 
而 成 。 

2007 年 10 月 30 日 ,北京 奥运 会 门票 面向 境内 公众 第 二 阶段 预 售 正式 启动 。 上 午 一 
开始 ,公众 提交 申请 空前 踊跃 。 上 午 9 时 至 10 时 ,官方 票务 网 站 的 浏览 量 达 到 了 800 万 
次 ,票务 呼叫 中 心 热线 从 9 时 至 10 时 的 呼 人 量 超过 了 380 万 人 次 。 由 于 瞬间 访问 数量 过 
大 ,技术 系统 应 对 不 畅 ,造成 很 多 申购 者 无 法 及 时 提交 申请 ,为 此 北京 奥 组 委 票务 中 心 对 
广大 公众 未 能 及 时 、 便 捷 地 实现 奥运 门票 预订 表示 娄 意 。 

北京 奥 组 委 票务 中 心 主 任 容 军 介绍 有 关 情 况 。 北 京 奥 运 会 门票 面向 境内 公众 销售 第 
二 阶段 正式 启动 ,启动 以 后 不 久 ,系统 访问 流量 猛 增 ,官方 票务 网 站 流量 瞬时 达到 每 小 时 
800 万 次 ,超过 了 系统 设计 每 小 时 100 万 次 的 承受 量 。 启 动 后 第 一 小 时 从 各 售票 渠道 瞬 
时 提交 到 票务 系统 的 门票 达到 20 万 张 ,也 超过 了 系统 设计 每 小 时 销售 15 万 张 的 票务 处 
理 能 力 , 从 而 出 现 网 络 拥堵 ,售票 速度 慢 或 暂时 不 能 登录 系统 的 情况 ,直接 造成 公众 通过 
中 国 银行 的 售票 网 点 、 票 务 呼 叫 中 心 和 官方 票务 网 站 三 个 售票 渠道 都 无 法 及 时 提交 购 票 
申请 。 

从 技术 记录 结果 来 看 ,当天 上 午 9:00 到 10:00, 票 务 呼叫 中 心 呼 人 量 超过 380 万 人 
次 ,由 于 成 功 接 通 电话 的 公众 无 法 成 功 订 票 , 迟 迟 不 愿意 挂 线 , 造 成 后 续 用 户 无 法 接 通电 
话 ,形成 票务 呼叫 中 心 长 时 间 占 线 的 结果 。 在 中 国 银 行 各 售票 网 点 由 于 同样 的 原因 , 购 票 
人 排 起 了 长 队 。 从 上 午 9:00 到 12:00, 访 问 达 到 两 千 万 次 ,三 个 渠道 连接 到 官方 票务 网 
站 时 ,网 络 带宽 容量 超出 负荷 。 拥 堵 情 况 的 主要 原因 是 后 台 处 理 系统 在 承受 了 每 小 时 
800 万 次 流量 压力 后 显现 出 处 理 能 力 不 足 的 问题 。 

解决 的 办 法 是 扩容 改进 处 理 机 制 、 增 加 带宽 等 。 

首先 ,对 北京 和 上 海 的 数据 中 心 都 进行 了 扩容 。 无 论 是 服务 器 还 是 数据 库 ,都 通过 添 
加 模块 来 进行 扩容 。 

其 次 ,改造 后 的 系统 强化 了 申请 池 的 功能 。 在 同时 进入 系统 用 户 过 多 时 ,申请 池 可 以 
让 系统 采取 比较 机 动 的 处 理 方法 。 当 同一 时 间 提 交 的 购 票 申请 超出 了 系统 的 处 理 能 力 的 
时 候 , 系 统 将 会 将 所 有 申请 置 入 一 个 申请 池 ,并 在 其 中 随机 选择 一 部 分 进行 处 理 , 直 至 将 
池内 清空 。 由 于 系统 在 改进 后 处 理 能 力 得 到 提高 ,保证 了 等 待 处 理 的 量 比 之 前 得 到 大 幅 
度 提 升 , 同 时 有 效 地 避免 系统 崩溃 。 

再 次 ,扩大 带宽 。 第 三 轮 售 票 中 ,中 国 网 通 为 每 个 数据 中 心 都 配备 了 两 个 直接 接 人 主 


17 


《软件 测试 技术 教程 》 


干 网 的 千 兆 接口 ,最 大 限度 地 保证 带宽 不 成 为 购 票 系统 的 瓶颈 。 

最 后 ,在 两 轮 售票 间 的 几 个 月 内 对 新 系统 进行 了 充分 的 测试 ,其 中 包括 各 模块 测试 、 
整体 测试 .与 中 国 银行 并 发 过 程 的 测试 .压力 测试 以 及 数据 中 心间 灾 备 测试 ,以 保证 正式 
售票 过 程 能 够 顺利 进行 。 


2. 许霆 АТМ 案例 


许霆 (1983 年 出 生 ) ,南下 的 打工 小 伙 ,2006 年 4 月 21 日 ( 周 五 ) 晚 在 广州 商业 银行 的 
一 个 ATM 机 取款 ,原本 卡 上 只 有 176. 97 元 ,他 想 取 100 元 ,但 多 敲 了 一 个 0, 其 结果 是 
АТМ 机 真 的 吐 了 1000 元 出 来 ,而 且 他 查询 后 发 现 账 上 只 扣 了 一 元 钱 。 随 后 ,他 连续 取 
款 171 笔 , 合 计 17.5 万 元 。 银 行 于 4 月 24 日 (周一 ) 进 行 设备 例 行 检查 时 发 现 情况 ,30 
日 报案 。 

2008 年 3 月 31 日 广州 市 中 级 人 民法 院 二 审判 定 * 许 霆 犯 盗窃 罪 , 判 处 有 期 徒刑 五 
年 ,并 处 罚金 二 万 元 "(一 审判 的 是 无 期 ,引起 巨大 的 社会 与 论 )。2010 年 7 月 31 日 ,许霆 
因 表 现 良好 获 假释 。 

原因 分 析 如 下 : 

2006 年 4 月 21 Н 17 时 许 , 运 营 商 广州 广 达 运通 公司 对 涉案 的 自动 柜员 机 进行 系统 
升级 。 该 自动 柜员 机 在 系统 升级 后 出 现 异常 ,1000 元 以 下 (不 含 1000 元 ) 取 款 交 易 正常 ， 
1000 元 以 上 的 取款 交易 ,每 取款 1000 元 按 1 元 形成 交易 报 文 向 银行 主机 报 送 , 即 持 卡 人 
输入 取款 1000 元 的 指令 ,自动 柜员 机 出 钞 1000 元 ,但 持 卡 人 账户 实际 扣 款 1 元 。( 摘 自 
二 审判 决 书 ) 许 霆 在 170 余 次 取款 中 间 , 还 把 情况 告诉 了 他 的 一 位 郭 姓 工 友 , 该 位 先生 以 
农行 卡 同样 在 该 柜员 机 上 分 多 次 取款 19 000 元 ( 按 以 上 情况 推测 ,广州 商行 以 “本 代 他 ” 
的 形式 通知 农行 扣 款 19 元 ) 。 这 是 一 个 典型 的 软件 缺陷 ,软件 不 经 测试 直接 上 线 运行 。 


3. АТ«ТЖ НЕН 


AT&T 拥 有 多 达 115 个 交换 站 ,将 遍及 世界 的 当地 电话 公司 连接 起 来 ,每 天 可 处 理 
1.15 亿 次 美国 境内 的 呼叫 和 150 万 次 的 海外 呼叫 ,每 个 交换 站 每 小 时 能 处 理 将 近 75 万 
次 呼叫 。 

1990 年 1 月 15 日 的 下 午 ,AT&T 的 全 球 电话 网 络 的 管理 人 员 发 现 显示 网 络 状态 的 
视频 监视 器 上 不 断 出 现 红 色 报 警 信号 。 报 警 信号 说 明 网 络 不 能 完成 呼叫 ,在 接 下 来 的 9 
个 小 时 内 ,有 近 6500 万 个 电话 没有 接 通 ,造成 大 约 6000 万 美元 的 损失 。 尽 管 系统 的 管理 
人 员 设 法 在 9 小 时 内 解决 了 问题 ,但 是 要 查 明 原因 恐怕 需要 好 几 天 。 

大 约 在 系统 瘫痪 前 一 个 月 ,软件 进行 了 升级 ,以 允许 某 种 类 型 的 消息 更 快 地 通过 系 
统 。 在 升级 软件 的 一 小 段 代码 中 发 现 了 一 个 错误 ,该 错误 在 严格 的 测试 和 一 个 月 的 试用 
中 没有 被 发 现 ,因为 那 几 行 代码 只 在 网 络 特别 忙 而 发 生 了 特定 的 事件 序列 时 才 会 调用 。 
各 单个 交换 站 工作 都 正常 ,但 交换 站 之 间 的 消息 传递 的 快速 步调 引起 系统 反复 重启 动 。 
当 运 行 升级 软件 的 交换 站 数 减 少 到 80 台 左 右 时 ,网 络 似 乎 又 恢复 正常 。 这 时 ,其 余 的 交 
换 站 仍然 运行 旧版 软件 ,可 以 处 理 尽 可 能 多 的 呼叫 。 

这 种 类 型 的 “网 络 隐形 错误 ”确实 很 难 发 现 和 想到 ,要 在 一 个 测试 用 的 系统 上 精确 模 


拟 和 预料 真实 世界 中 的 网 络 通信 是 十 分 困难 的 。 事 实 上 ,AT&T 确实 也 在 它 的 测试 网 络 
上 测试 了 该 软件 ,但 没 能 发 现 该 问题 。 

与 首次 瘫痪 相隔 6 个 月 ,又 遇 到 了 另 一 个 控制 交换 站 的 软件 失效 。 在 1991 年 6 月 到 
7 月 间 的 三 个 星期 内 ,8 次 电话 不 通 事故 影响 了 大 约 2000 万 电话 客户 。 不 通 的 原因 难以 
捉摸 ,而 且 , 本 地 电话 公司 之 间 似 乎 也 不 愿意 彼此 透露 如 何 修复 问题 的 有 关 信 息 。 最 终 ， 
由 BellCore 贝尔 通信 研究 公司 经 过 6 个 月 的 调查 ,认定 引起 这 一 问题 的 原因 仍然 是 这 个 
交换 机 软件 。 

这 些 事故 的 原因 是 制造 交换 机 的 软 硬 件 公 司 DSC 通信 公司 对 软件 的 一 次 修改 不 当 
造成 的 。1991 年 4 月 ,DSC 通信 公司 发 布 了 交换 机 的 新 版 本 。 很 快 ,华盛顿 ,宾夕法尼亚 
和 北 卡 罗 来 纳 州 的 用 户 磁 到 了 这 一 问题 。 每 次 瘫痪 首先 由 一 个 交换 机 的 一 个 小 问题 引 
起 ,该 问题 与 信号 传输 点 (Signal Transfer Point,STP) 有 关 。 然 后 这 一 问题 会 触发 大 量 
的 错误 消息 ,结果 导致 STP 被 关闭 ,进而 导致 邻近 系统 的 瘫痪 。 

最 后 ,BellCore 发 现 问题 出 在 新 版 软件 中 的 一 个 数字 错误 : 一 个 应 是 十 六 进 制 数 D 
(1101) 的 数 误 为 十 六 进 制 数 6(0110)。 在 交换 算法 中 ,这 个 数字 错误 导致 交换 机 允许 错 
误 消 息 饱和 。 通 过 网 络 ,一 个 系统 出 错 导致 其 他 系统 崩溃 。 正 常情 况 下 ,饱和 的 交换 机 只 
简单 地 通告 其 他 系统 出 现 了 拥塞 情况 。DSC 通信 公司 很 快 发 布 了 该 软件 的 补丁 ,专门 处 
理 这 一 问题 。 对 源 程序 作 了 广泛 的 测试 之 后 发 现 , 一 个 程序 员 对 源 程序 中 的 三 行 代 码 做 
了 修改 ,其 中 一 行 包含 低级 的 打字 错误 ,软件 发 布 前 ,该 段 代 码 没有 经 过 测试 。 


4. 阿 丽 亚 娜 火箭 


1996 年 6 月 4 日 , 阿 丽 亚 娜 (Ariane)5 型 火箭 在 法 属 圭亚那 库 鲁 航天 中 心 首次 发 射 。 
当 火箭 离开 发 射 台 升 空 30 秒 时 , 距 地 面 约 4000 米 , 天 空中 传 来 两 声 巨大 的 爆炸 声 并 出 现 
一 团 橘 黄色 的 巨大 火球 ,火箭 碎 块 带 着 火星 撒 落 在 直径 约 两 公里 的 地 面 上 。 与 阿 丽 亚 娜 
5 型 火箭 一 同化 为 灰 烛 的 还 有 4 颗 太阳 风 观 察 卫星 。 这 是 世界 航天 史上 又 一 大 悲剧 。 阿 
丽 亚 娜 5 型 火箭 爆炸 如 图 1-6 所 示 o 


图 1-6 阿 丽 亚 娜 5 型 火箭 爆炸 


阿 丽 亚 娜 5 型 火箭 由 欧洲 航天 局 研制 ,火箭 高 52.7 米 , 重 740 吨 , 研 制 费用 为 70 亿 
美元 ,研制 时 间 1985—1996 年 , 参 研 人 员 约 万 人 。 事 故 原因 报道 : 阿 丽 亚 娜 5 型 火箭 采 
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用 阿 丽 亚 娜 4 型 火箭 初始 定位 软件 。 软 件 不 适应 物理 环境 的 变化 。 阿 丽 亚 娜 5 型 火箭 起 
飞 推 力 15 900kN ,重量 740 吨 , 阿 丽 亚 娜 4 型 火箭 起 飞 推力 5400kN ,重量 474 吨 。 阿 5 型 
火箭 加 速度 =21.5g, 阿 4 型 火箭 加 速度 =11. 4g。 阿 丽 亚 娜 5 型 火箭 加 速度 值 输入 到 计 
算 机 系统 的 整 型 加 速度 值 产生 上 溢出 ,以 加 速度 为 参数 的 速度 .位 置 计算 错误 ,导致 惯性 
导航 系统 对 火箭 控制 失效 ,程序 只 得 进入 异常 处 理 模 块 ,引爆 自 毁 。 箭 载 两 套 计 算 机 系统 
由 于 硬件 .软件 完全 相同 ,没有 达到 软件 容错 的 目的 。 

导航 系统 负责 参照 基于 惯性 参考 系统 输入 的 特定 轨道 来 计算 航线 矫正 。Ariane5 的 
计算 机 系统 与 Ariane4 不 同 ,电子 仪器 多 了 一 倍 。 有 两 个 惯性 参考 系统 来 计算 火箭 的 位 
置 ,两 台 计 算 机 将 计划 中 的 轨道 和 实际 轨道 进行 比较 ,并 用 两 套 控制 仪器 来 控制 火箭 。 如 
果 某 个 构件 出 了 问题 ,后 备 系统 将 随时 接 蔡 现行 系统 。 

专 为 地 面 设 计 的 校准 系统 ,使 用 16 位 字 来 存储 水 平 速度 (对 由 于 风 和 地 球 运 行 产生 
的 位 移 计算 而 言 ,16 位 是 绰绰有余 的 ) 。 飞 行 30 秒 后 ,Ariane5 的 水 平 速度 计算 产生 了 洲 
出 ,由 此 引出 了 一 种 意外 ,通过 关 掉 机 载 计 算 机 来 处 理 这 一 问题 ,并 把 控制 权 交 给 后 备 系 
统 。 这 个 事故 的 教训 是 军用 软件 的 运行 依赖 于 支撑 环境 ,武器 平台 的 变化 可 能 影响 军用 
软件 采集 数据 的 精度 .范围 和 对 系统 的 控制 。 军 用 软件 重用 必须 重新 进行 系统 论证 和 系 
统 测试 /试验 , 决 不 能 想当然 。 


5. 辐射 治疗 仪 案例 


Therac-25 事件 是 在 软件 工程 界 被 大 量 引 用 的 案例 。Therac-25 是 Atomic Energy 
of Canada Limited 所 生产 的 一 种 辐射 治疗 的 机 器 。 由 于 其 软件 设计 时 的 瑕 症 , 致 命 地 超 
过 剂量 设 定 ,导致 在 1985 年 6 月 到 1987 年 1 月 之 间 产 生 多 起 医疗 事故 ,5 名 患者 死亡 ， 
多 名 患者 严重 辐射 灼伤 。 这 些 事故 是 操作 失误 和 软件 缺陷 共同 造成 的 。Therac-25 有 两 
жің Ян. 低能 量 模式 ,可 以 直接 照射 病人 ;高 能 量 模式 ,需要 屏蔽 一 个 X 射线 过 
滤 镜 。 

问题 在 于 ,用 户 界面 和 射线 控制 器 之 间 用 户 界面 设计 存在 竞争 。 一旦 操作 者 选择 了 
一 种 模式 ,机 器 就 开始 自我 配置 。 如 果 操 作者 在 8 秒 之 内 ,撤销 了 前 面 的 操作 并 选择 其 他 
不 同 的 模式 ,系统 的 其 他 部 分 并 不 会 接受 新 的 设置 。 因 为 ,该 机 器 需要 8 秒 钟 才能 使 磁 针 
摇摆 到 位 。 因 此 , 某 些 操作 熟练 .动作 敏捷 的 操作 者 会 不 经 意 地 增加 病人 的 药 量 ,而 这 些 
致命 的 药 量 造成 了 几 个 病人 的 死亡 。 

事故 产生 的 情况 是 : 

(1) 操作 人 员 首 先 错误 选择 了 高 能 量 模式 (此 时 ,机 器 将 开始 配置 ,而 且 机 器 配置 是 
高 级 别 任务 ,在 配置 完成 的 8 秒 钟 内 将 不 接受 新 命令 ) 。 

(2) 操作 人 员 撤 销 前 面 的 高 能 量 模式 选择 ,并 选择 另 一 种 模式 一 一 低能 量 模式 。 

(3) 操作 人 员 熟 练 到 在 8 秒 钟 之 内 完成 其 他 输入 操作 ,并 启动 放射 。 

(4) 机 器 将 仍 按 高 能 量 方式 照射 病人 ,而 不 是 操作 人 员 重 新 输入 的 低能 量 模 式 。 

事故 原因 确定 后 ,所 有 的 Therac-25 停止 使 用 ,并 召回 和 重新 修改 设计 ,安装 硬件 保 
护 装 置 。 此 后 管理 层 、 工 程 界 、 学 术 界 进行 了 长 时 间 的 讨论 ,对 事故 的 教训 进行 了 探讨 。 
其 中 美国 著名 的 安全 性 工程 专家 Leveson 对 事故 的 总 结 和 认识 最 具 系 统 性 和 代表 性 ,下 
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述 部 分 引用 了 她 得 出 的 一 些 主要 结论 : 

用 户 界 面 在 Therac-25 事件 中 受到 了 某 种 程度 的 关注 ,实际 上 它 在 这 次 事件 中 只 有 
部 分 影响 ,虽然 软件 的 界面 和 这 个 软件 的 其 他 部 分 一 样 ,存在 改进 的 余地 。 软 件 工程 师 需 
要 接受 更 多 的 界面 设计 培训 ,从 人 -机 工程 的 角度 需要 更 多 的 数据 输入 。 必 须 着 重 指出 在 
用 户 友好 界面 和 安全 性 方面 存在 着 潜在 冲突 。 用 户 界面 设计 的 一 个 目的 是 尽 可 能 方便 操 
作者 使 用 ,但 是 在 Therac-25 软件 中 ,操作 的 简单 性 是 以 牺牲 系统 安全 性 为 代价 的 。 最 后 
不 仅 在 初始 设计 中 必须 考虑 软件 和 软件 界面 的 安全 性 ,而 且 需 要 记录 决策 理由 ,使 得 以 后 
的 变更 有 依据 可 查 。 


6. FERIA 


20 世纪 70 年 代 有 一 个 叫 Dave 的 程序 员 ,负责 本 公司 的 工资 系统 。 他 使 用 的 计算 机 
存储 空间 很 小 ,迫使 它 尽 量 节省 每 一 个 字 节 。Dave 自豪 地 将 自己 的 程序 压缩 的 比 其 他 人 
小 。 他 使 用 的 其 中 一 个 方法 是 把 4 位 数 日 期 缩减 为 2 位 ,例如 1973 年 为 73。 因 为 工资 
系统 极度 依赖 数据 处 理 ,Dava 节省 了 可 观 的 存储 空间 。Dava 并 没有 想到 这 是 个 很 大 的 
问题 ,他 认为 只 有 在 2000 年 时 程序 计算 00 或 01 这 样 的 年 份 时 才 会 出 现 错误 。 他 知道 那 
时 会 出 问题 ,但 是 在 25 年 之 内 程序 肯定 会 更 改 或 升级 ,而 且 眼前 的 任务 比 未 来 更 加 重要 。 
这 一 天 毕竟 是 要 来 的 。1995 年 ,Dava 的 程序 仍然 在 使 用 ,而 Dava 退休 了 , 谁 也 不 会 想到 
进入 程序 检查 2000 年 的 兼容 性 问题 ,更 不 用 说 去 修改 了 。 

例如 ,银行 在 计算 利息 时 ,是 用 现在 的 日 期 如 “2000 年 1 月 1 日 ? 减 去 客户 当时 的 存 
款 日 期 如 “1980 年 1 月 1 日 ”, 如 果 年 利息 为 3%, 那 么 银行 应 付 给 客户 20 年 利息 。 如 果 
年 份 存储 问题 没有 得 到 纠正 ,其 存款 年 数 就 变 为 一 80 年 ,客户 反而 应 付 给 银行 利息 。 

开发 者 认为 在 20 多 年 内 程序 肯定 会 更 新 或 升级 ,而 且 眼 前 的 任务 比 计 划 遥 不 可 及 的 
未 来 更 加 重要 。 为 此 ,全 世界 付出 了 十 分 巨大 的 代价 来 更 换 或 升级 类 似 程 序 以 解决 千年 
虫 问题 ,特别 是 金融 、 保 险 、 军 事 、 科 学 、 商 务 等 领域 ,花费 大 量 的 人 力 、 物 力 对 现 有 的 各 种 
各 样 程序 进行 检查 、 修 改 和 更 新 。 估 计 全 球 各 地 更 换 或 升级 类 似 的 前 者 程序 以 解决 潜在 
的 千年 虫 问题 的 费用 已 经 达 数 千 亿 美元 。 

通过 以 上 的 例子 ,可 以 看 出 软件 发 生 错误 时 对 人 类 生活 所 造成 的 各 种 影响 ,有 的 甚至 
会 带 来 灾难 性 的 后 果 。 软 件 测试 可 以 使 这 种 风险 降低 , 它 在 一 定 程度 上 解放 了 程序 员 ,使 
他 们 能 够 更 专心 于 解决 程序 的 算法 效率 。 同 时 它 也 减轻 了 售后 服务 人 员 的 压力 , 交 到 他 
们 手 里 的 程序 再 也 不 是 那些 “一 触 即 死机 ”的 定时 炸弹 ,而 是 经 过 严格 检验 的 完整 产品 。 
同时 ,软件 测试 的 发 展 对 程序 的 外 形 .结构 .输入 和 输出 的 规约 和 标准 化 提供 了 参考 ,并 推 
动 了 软件 工程 的 发 展 。 


习题 
1. 简 述 软件 和 软件 危机 。 


2. 简 述 软件 开发 过 程 和 软件 开发 过 程 模型 。 
3. 什么 是 软件 缺陷 ? 简 述 软件 缺陷 产生 的 原因 和 构成 。 
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第 2 章 软件 测试 基础 


本 章 介 绍 软件 测试 的 基础 知识 。 要 成 为 一 名 合格 的 软件 测试 人 员 ,要 理解 软件 测试 
的 含义 和 软件 测试 的 基本 原则 ,了解 软件 测试 的 发 展 过 程 以 及 软件 测试 与 软件 开发 的 关 
系 ; 了 解 软 件 测试 V 模型 、W МН 模型 X 模型 和 前 置 模型 ;同时 还 要 了 解 软件 测试 的 
一 些 基 本 理论 ,如 软件 测试 用 例 的 设计 和 软件 测试 方法 等 ,如 静态 测试 和 动态 测试 . 黑 盒 
测试 . 白 盒 测 试 和 灰 盒 测试 ,避免 进入 一 些 软件 测试 的 误区 。 本 章 还 介绍 了 什么 是 软件 质 
量 和 软件 质量 标准 以 及 与 软件 测试 密切 相关 的 软件 可 靠 性 问题 。 


2.1 软件 测试 的 含义 


对 于 软件 测试 的 含义 ,根据 侧重 点 的 不 同 有 很 多 种 定义 ,下 面 是 三 种 比较 有 代表 性 的 
软件 测试 定义 。 

С. Ј. Myers 在 其 经 典 论著 “The Art of Software Testing” 中 对 软件 测试 的 定义 如 
下 : 软件 测试 是 为 了 发 现 错误 而 执行 程序 的 过 程 ;测试 是 为 了 证 明 程 序 有 和 错 , 而 不 是 证 明 
程序 无 错 ;一 个 好 的 测试 用 例 在 于 它 能 发 现 至 今 未 发 现 的 错误 ;一 个 成 功 的 测试 就 是 发 现 
了 至 今 未 发 现 的 错误 的 测试 。 

1983 年 IEEE( 国 际 电子 电气 工程 师 协会 ) 提 出 的 软件 工程 标准 术语 中 给 软件 测试 下 
的 定义 是 : 使 用 人 工 或 自动 手段 来 运行 或 测定 某 个 系统 的 过 程 , 其 目的 在 于 检验 它 是 否 
满足 规定 的 需求 或 是 弄 清 预期 结果 与 实际 结果 之 间 的 差别 。 

1990 年 IEEE 再 次 给 软件 测试 下 的 定义 是 : 在 特定 的 条 件 下 运行 系统 或 构件 ,观察 
或 记录 结果 ,对 系统 的 某 个 方面 做 出 评价 ;分 析 某 个 软件 项 以 发 现 现存 的 与 要 求 的 条 件 之 
差别 ( 即 错误 ) 并 评价 此 软件 项 的 特征 。 

总 之 ,软件 测试 的 目的 就 是 希望 能 以 最 少 的 人 力 和 时 间 发 现 潜在 的 各 种 错误 和 缺陷 。 
应 根据 开发 各 阶段 的 需求 .设计 等 文档 或 程序 的 内 部 结构 精心 设计 测试 用 例 ,并 利用 这 些 
实例 来 运行 程序 ,以 便 发 现 错误 。 需 要 强调 的 一 点 是 ,软件 测试 不 只 是 软件 测试 人 员 的 工 
WE ,也 是 软件 开发 人 员 和 软件 使 用 者 的 工作 。 


2.1.1 软件 测试 的 发 展 
软件 测试 随 着 软件 的 诞生 而 同时 出 现 了 。 只 不 过 当时 的 测试 只 是 人 们 现在 所 说 的 调 


程序 ,只 是 为 了 证 明 程序 可 以 正常 进行 而 已 ;也 没有 计划 和 方法 ,测试 用 例 的 设计 和 选取 
也 都 是 根据 测试 人 员 的 经 验 随 机 进行 的 。 
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Á 20 世纪 50 年 代 后 期 到 20 世纪 60 年 代 , 各 种 高 级 语言 相继 诞生 ,测试 的 重点 也 逐 
步 转 到 使 用 高 级 语言 编写 的 软件 系统 中 来 ,但 程序 的 复杂 性 远 远 超过 了 以 前 。 尽 管 如 此 ， 
由 于 受到 硬件 的 制约 ,在 计算 机 系统 中 ,软件 仍然 处 于 次 要 位 置 。1957 年 ,软件 测试 首次 
作为 发 现 软件 缺陷 的 活动 ,与 调试 区 分 开 来 。 这 个 时 期 ,世界 著名 的 科学 家 图 灵 给 软件 测 
试 一 个 最 初 的 定义 : 测试 是 程序 正确 性 的 一 种 极端 实验 形式 。 到 了 20 世纪 60 年 代 , 关 
于 软件 行业 的 研究 发 现 软件 行业 总 在 经 历 着 危机 ,有 些 人 认为 当前 软件 行业 的 危机 已 经 
减缓 。 但 软件 趋 于 复杂 ,使 得 软件 缺陷 几乎 是 不 可 避免 的 。 特 别 是 21 世纪 以 来 , 随 着 互 
联网 技术 的 传播 .开发 技术 的 提高 .行业 竞争 的 加 剧 ,软件 技术 也 在 加 速 发 展 。 例 如 ,用 
Java 语言 比 以 往 高 级 语言 更 容易 编写 程序 。 同 时 软件 技术 的 发 展 , 使 得 越 来 越 多 的 用 户 
对 软件 的 依赖 性 及 对 软件 质量 的 期 望 值 也 迅速 提高 。 

在 20 世纪 70 年 代 以 后 , 随 着 计算 机 处 理 速度 的 提高 ,存储 器 容量 的 迅速 增加 ,软件 
在 整个 计算 机 系统 中 的 地 位 变 得 越 来 越 重要 。 随 着 软件 开发 技术 的 成 熟 和 完善 ,软件 的 
规模 也 越 来 越 大 ,复杂 度 也 大 幅度 增加 。 因 此 ,软件 的 可 靠 性 面临 着 前 所 未 有 的 危机 ,给 
软件 测试 工作 带 来 了 更 大 的 挑战 ,很 多 测试 理论 和 测试 方法 应 运 而 生 ,逐渐 形成 了 一 套 完 
整 的 体系 ,培养 和 造就 了 一 批 批 出 色 的 测试 人 才 。1972 年 , 北 卡罗来纳 大 学 举行 首届 软 
件 测试 会 议 ,John Good Enough 和 Susan Gerhart 在 IEEE 上 发 表 《 测 试 数据 选择 的 原 
理 ) 一 文 , 确 定 了 软件 测试 是 软件 的 一 种 研究 方向 。 

进入 20 世纪 90 年 代 后 ,计算 机 技术 日 趋 成 熟 ,软件 应 用 范围 逐步 扩大 ,软件 规模 和 
复杂 性 急剧 增加 ,与 此 同时 ,计算 机 出 现 故 障 引起 系统 失效 的 可 能 性 也 逐渐 增加 。 由 于 计 
算 机 硬件 技术 的 进步 ,元 器 件 可 靠 性 的 提高 ,硬件 设计 和 验证 技术 的 成 熟 ,硬件 故障 相对 
显得 次 要 了 ,软件 故障 正 逐 渐 成 为 导致 计算 机 系统 失效 和 停机 的 主要 因素 ,每 年 在 几 百 万 
行 代码 中 找到 并 纠正 错误 ,业界 需要 花费 600 亿美 元 。 

如 今 在 软件 产业 化 发 展 的 大 趋势 下 , 人们 对 软件 质量 ,成 本 和 进度 的 要 求 也 越 来 越 
高 。 传 统 软件 的 测试 大 多 是 基于 代码 运行 的 ,并 且 常 常 是 软件 开发 的 后 期 才 开 始 进行 。 
而 在 整个 软件 开发 过 程 中 ,测试 已 经 不 再 只 是 基于 程序 代码 进行 的 活动 ,而 是 一 个 基于 整 
个 软件 生命 周期 的 质量 控制 活动 ,贯穿 于 软件 开发 的 各 个 阶段 。 


2.1.2 软件 测试 的 基本 原则 


软件 测试 是 一 个 复杂 的 系统 工程 ,软件 测试 过 程 中 测试 人 员 必 须 十 分 清楚 软件 测试 
的 基本 原则 ,制订 详细 、 周 密 的 计划 。 不 充分 的 测试 是 思春 的 ,过 度 的 测试 也 是 一 种 罪孽 。 
软件 测试 的 基本 原则 有 如 下 几 点 。 


1. 所 有 的 软件 测试 都 应 该 追溯 到 用 户 需 求 


软件 开发 过 程 中 犯 的 最 严重 的 错误 是 导致 软件 系统 无 法 满足 用 户 需求 的 错误 ,系统 
开发 过 程 中 发 现 的 问题 可 能 发 生 在 开发 前 期 的 某 个 阶段 ,因此 纠正 错误 必须 追溯 前 期 的 
ТАЖ. 
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2. 尽早 地 和 不 断 地 进行 软件 测试 
软件 测试 应 该 尽早 进行 ,最 好 在 需求 阶段 就 开始 介入 ,因为 最 严重 的 错误 不 外 乎 是 系 


统 不 能 满足 用 户 的 需求 。IBM 的 研究 结果 表明 ,缺陷 存在 放大 趋势 。 图 2-1 表示 了 软件 
缺陷 放大 模型 大 致 状况 。 


详细 设计 |ті | 代码 阶段 
阶段 缺陷 的 缺陷 


需求 阶段 | 放大 " 倍 | 概要 设计 си 
的 缺陷 阶段 缺陷 


图 2-1 软件 缺陷 放大 模型 
由 此 可 见 ,问题 发 现 越 早 ,解决 问题 的 代价 就 越 小 ,这 是 软件 开发 过 程 中 的 黄金 法 则 。 
3. 程序 员 应 该 避免 检查 自己 的 程序 


程序 员 应 该 避免 检查 自己 的 程序 ,软件 测试 应 该 由 第 三 方 来 负责 ,主要 原因 是 : 
(1) 程序 员 轻 易 不 会 承认 自己 写 的 程序 有 错误 。 

(2) 程序 员 的 测试 思路 有 局 限 性 ,在 做 测试 时 很 容易 受到 编程 思路 的 影响 。 
(3) 多 数 程 序 员 没 有 严格 正规 的 职业 训练 ,缺乏 专业 测试 人 员 的 意识 。 

(4) 程序 员 没 有 养 成 错误 跟踪 和 回归 测试 的 习惯 。 


4. 不 可 能 完全 的 测试 
对 一 个 程序 进行 完全 测试 就 意味 着 在 测试 结束 之 后 ,再 也 不 会 发 现 其 他 软件 错误 了 。 


实际 情况 是 不 可 能 的 。 其 主要 原因 有 以 下 几 点 : 


(1) 不 可 能 测试 程序 对 所 有 可 能 输入 的 响应 。 
(2) 不 可 能 测试 到 程序 每 一 条 可 能 的 执行 路 径 。 
(3) 无 法 找 出 所 有 的 设计 错误 。 

(4) 不 能 采用 逻辑 来 证 明 程 序 的 正确 性 。 


5. 应 该 充分 注意 测试 中 的 群集 现象 


注意 错误 集中 的 现象 ,软件 缺陷 的 “扎堆 ”现象 的 常见 形式 : 

(1) 对 话 框 的 某 个 控件 功能 不 起 作用 ,可 能 其 他 控件 的 功能 也 不 起 作用 。 

(2) 某 个 文本 框 不 能 正确 显示 , 则 其 他 文本 框 也 可 能 有 显示 问题 。 

(3) 联机 帮助 某 段 文字 的 翻译 包含 了 很 多 错误 ,与 其 相 邻 的 上 下 段 的 文字 可 能 也 包 


含 很 多 的 语言 质量 问题 。 


(4) 安装 文件 某 个 对 话 框 的 "上 一 步 ?或 “下 一 步 ?按钮 被 截断 , 则 这 两 个 按钮 在 其 他 


对 话 框 中 也 可 能 被 截断 。 


O) 在 一 段 程序 中 发 现 了 某 些 不 良 的 编写 程序 的 习惯 ,这 个 程序 员 其 他 程序 可 能 也 


有 类 似 问题 ,或 者 整个 团队 都 有 类 似 问题 。 
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6. 合理 安排 测试 计划 


合理 的 测试 计划 有 助 于 测试 工作 顺利 有 序 地 进行 ,因此 要 求 在 对 软件 进行 测试 之 前 
所 制订 的 测试 计划 中 ,应 该 结合 多 种 针对 性 强 的 测试 方法 , 列 出 所 有 可 使 用 资源 ,建立 一 
个 正确 的 测试 目标 。 

要 本 着 严 说、 准确 的 原则 ,周到 细致 地 做 好 测试 前 期 的 准备 工作 ,避免 测试 的 随意 性 。 
尤其 是 要 尽量 科学 合理 地 安排 测试 时 间 。 测 试 时 间 安 排 尽 量 宽松 ,不 要 希望 在 极 短 的 时 
间 内 完成 一 个 高 水 平 的 测试 。 


7. 测试 时 既 要 考虑 合法 情况 .也 要 考虑 非法 情况 


设计 测试 用 例 时 应 考虑 到 合法 的 输入 和 不 合法 的 输入 ,以 及 各 种 边界 条 件 特殊 情况 
下 要 制造 极端 状态 和 意外 状态 ,如 网 络 异 常 中 断 .电源 断 电 等 。 


8. 对 缺陷 结果 要 进行 一 个 确认 过 程 


一 般 由 A 测试 出 来 的 错误 ,一 定 要 由 B 来 确认 。 严 重 的 错误 可 以 召开 评审 会 议 进 行 
讨论 和 分 析 , 对 测试 结果 要 进行 严格 地 确认 ,是 否 真 的 存在 这 个 问题 以 及 严重 程度 等 。 


9. 妥善 保存 所 有 文档 


在 测试 过 程 中 应 妥善 保存 所 有 文档 ,包括 测试 计划 、 测 试用 例 、 出 错 统计 和 最 终 分 析 
报告 ,为 维护 提供 方便 。 


2.1.3 软件 测试 与 软件 开发 的 关系 


软件 开发 过 程 一 般 包括 六 个 阶段 , 即 第 一 阶段 规划 、 第 二 阶段 需求 分 析 、 第 三 阶段 设 
计 、 第 四 阶段 编写 程序 .第 五 阶段 测试 和 第 六 阶段 运行 和 维护 ,这 六 个 阶段 构成 了 软件 的 
生存 周期 。 软 件 测试 在 整个 软件 的 生命 周期 中 占有 重要 的 地 位 ,测试 从 生命 周期 的 第 一 
个 阶段 就 开始 了 ,并 且 贯 穿 整个 软件 开发 生命 周期 ,以 检验 各 个 阶段 的 成 果 是 否 达 到 预期 
的 目标 。 

(1) 项 目 规划 阶段 : 负责 整个 测试 阶段 的 监控 。 

(2) 需求 分 析 阶 段 : 确定 测试 需求 分 析 ,制订 系统 测试 计划 。 

(3) 概要 设计 和 详细 设计 阶段 : 制订 集成 测试 计划 和 单元 测试 计划 。 

(4) 编码 阶段 : 开发 相应 的 测试 代码 或 测试 脚本 。 

(5) 测试 阶段 : 实施 测试 ,并 提交 相应 的 测试 报告 。 

软件 测试 的 基本 要 求 体现 在 两 个 方面 ,首先 是 软件 产品 的 正确 性 和 完整 性 ,其 次 是 软 
件 系统 的 协调 性 和 一 致 性 。 软 件 测 试 贯穿 于 软件 开发 过 程 的 整个 期 间 。 软 件 测试 与 软件 
开发 的 关系 如 图 2-2 所 示 。 
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详细 设计 评审 单元 测试 
详细 设计 | ав | 


жала 


… 各 子 模块 b 
9-6 - 
集成 测试 系统 测试 


需求 评审 概要 设计 评审 
| 概要 设计 | 


O 项 目 阶段 任务 的 里 程 碑 


1 7 rO 
测试 计划 ”测试 过 程 ”测试 评审 
图 2-2 软件 测试 与 软件 开发 的 关系 


2.2 软件 测试 模型 

软件 测试 技术 的 发 展 过 程 中 出 现 了 很 多 的 模型 ,下 面 介绍 最 具 代 表 性 У 模型 、W 模 
型 .H 模型 K 模型 和 前 置 模型 等 五 种 模型 。 

1. V 模型 


V 模型 是 最 具有 代表 性 的 测试 模型 。V 模型 最 早 是 由 Paul Rook 在 20 世纪 80 年 代 
后 期 提出 的 , 旨 在 改进 软件 开发 的 效率 和 效果 。V 模型 是 软件 开发 瀑布 模型 的 变种 , 因 
此 软件 测试 的 过 程 模型 中 ,V 模型 是 最 广为人知 的 模型 ,如 图 2-3 所 示 。 


需求 分 析 系统 测试 


概要 设计 集成 测试 


详细 设计 | ”| 单元 测试 


编码 
图 2-3 V 模 型 


V 模型 描述 了 基本 的 开发 过 程 和 测试 行为 , 左 侧 依次 是 需求 分 析 、 概 要 设计 、 详 细 设 
计 和 编码 , 右 侧 依次 是 编码 .单元 测试 .集成 测试 和 系统 测试 。V 模型 的 价值 在 于 它 非 常 
明确 地 标明 了 测试 过 程 中 存在 的 不 同 级 别 ,并 且 清 楚 地 描述 了 这 些 测试 阶段 和 开发 过 程 
期 间 各 阶段 的 对 应 关系 。V 模型 主要 反映 测试 活动 与 分 析 和 设计 的 关系 ,各 个 阶段 存在 
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着 一 一 对 应 关系 。 

V 模型 局 限 性 是 把 测试 作为 编码 之 后 的 最 后 一 个 活动 ,需求 分 析 等 前 期 产生 的 错误 
直到 后 期 的 验收 测试 才能 发 现 。 容 易 使 人 理解 为 测试 是 软件 开发 的 最 后 一 个 阶段 ,主要 
是 针对 程序 进行 测试 寻找 错误 ,而 需求 分 析 阶 段 隐藏 的 问题 一 直到 后 期 的 验收 测试 才 被 
发 现 。 

2. W 模型 


V 模型 的 局 限 性 在 于 没有 明确 地 说 明 早 期 的 测试 ,无 法 体现 “尽早 地 和 不 断 地 进行 
软件 测试 ?的 原则 。 在 V 模型 中 增加 软件 各 开发 阶段 应 同步 进行 的 测试 ,演化 为 W 模 
型 ,如 图 2-4 所 示 。 


需求 分 析 | | 需求 分 析 测 试 验收 验收 测试 
Ear 


概要 设计 | | 概要 设计 测试 实施 系统 测试 
详细 设计 | | 详细 设计 测试 集成 集成 测试 
编码 单元 测试 
图 2-4 W 模型 


W 模型 由 Evolutif 公司 提出 ,相对 于 V 模型 ,W 模型 更 科学 。W 模型 是 V 模型 的 发 
展 ,强调 的 是 测试 伴随 着 整个 软件 开发 周期 ,而 且 测 试 的 对 象 不 仅仅 是 程序 ,需求 、 功 能 和 
设计 同样 要 测试 。 测 试 与 开发 是 同步 进行 的 ,从 而 有 利于 尽早 地 发 现 问题 。W 模型 相当 
两 个 V 模型 的 至 加 ,一 个 是 开发 的 V, 一 个 是 测试 的 V。 巾 于 在 项 目 中 开发 和 测试 的 是 
同步 进行 ,相当 于 两 个 V 是 同步 并 行 的 ,测试 在 一 定 程 度 是 随 着 开发 的 进展 而 不 断 向 前 
进行 。 

W 模型 也 有 局 限 性 。W 模型 和 V 模型 都 把 软件 的 开发 视 为 需求 .设计 ,编码 等 一 系 
列 串 行 的 活动 ,无 法 支持 迭代 、 自 发 性 以 及 变更 调整 。 只 是 在 V 模型 的 基础 上 ,增加 了 开 
发 阶段 的 同步 测试 ,形成 W 模型 ;测试 与 开发 同步 进行 ,有 利于 尽早 发 现 问 题 。 


3. HH 模型 


V 模型 和 W 模型 均 存在 一 些 不 妥 之 处 。 首 先 ,如 前 所 述 ,它们 都 把 软件 的 开发 视 为 
需求 ,设计 编码 等 一 系列 串 行 的 活动 ,而 事实 上 ,虽然 这 些 活动 之 间 存 在 相互 牵制 的 关 
系 ,但 在 大 部 分 时 间 内 ,它们 是 可 以 交叉 进行 的 。 虽 然 软件 开发 期 望 有 清晰 的 需求 .设计 
和 编码 阶段 ,但 实践 告诉 我 们 ,严格 的 阶段 划分 只 是 一 种 理想 状况 。 现 实 工作 中 有 几 个 软 
件 项 目 是 在 有 了 明确 的 需求 之 后 才 开始 设计 的 呢 ? 所 以 ,相应 的 测试 之 间 也 不 存在 严格 
的 次 序 关系 。 同 时 ,各 层次 之 间 的 测试 也 存在 反复 触发 .迭代 和 增 量 关系 。 其 次 ,V 模型 
和 W 模型 都 没有 很 好 地 体现 测试 流程 的 完整 性 。 为 了 解决 以 上 问题 ,提出 了 H 模型 。 
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它 将 测试 活动 完全 独立 出 来 ,形成 一 个 完全 独立 的 流程 ,将 测试 准备 活动 和 测试 执行 活动 
清晰 地 体现 出 来 。H 模型 如 图 2-5 所 示 。 


测试 就 绪 点 
准备 工作 测试 执行 


一 测试 流程 


其 他 流程 (如 设计 流程 ) 


图 2-5 HH 模型 


H 模型 图 仅仅 演示 了 在 整个 生存 周期 中 某 个 层次 上 的 一 次 测试 “ 微 循环 ”。 图 中 的 
其 他 流程 可 以 是 任意 开发 流程 。 例 如 ,设计 流程 和 编码 流程 。 也 可 以 是 其 他 非 开 发 流程 。 
因此 ,只 要 测试 条 件 成 熟 了 ,测试 准备 活动 完成 了 ,测试 执行 活动 就 可 以 进行 了 。 概 括 地 
说 ,H 模型 反映 了 : 

(1) 软件 测试 不 仅仅 指 测试 的 执行 ,还 包括 很 多 其 他 活动 。 

(2) 软件 测试 是 一 个 独立 的 流程 ,贯穿 产品 整个 生命 周期 ,与 其 他 流程 并 发 地 进行 。 

СЗ) 软件 测试 要 尽早 准备 ,尽早 执行 。 

Са) 软件 测试 是 根据 被 测 物 的 不 同 而 分 层次 进行 的 。 不 同 层次 的 测试 活动 可 以 是 按 
照 某 个 次 序 先后 进行 的 ,但 也 可 能 是 反复 的 。 

在 也 模型 中 ,软件 测试 模型 是 一 个 独立 的 流程 ,贯穿 于 整个 产品 周期 ,与 其 他 流程 并 
发 地 进行 。 当 某 个 测试 时 间 点 就 绪 时 ,软件 测试 即 从 测试 准备 阶段 进入 测试 执行 阶段 。 


4. X 模型 


X 模型 也 是 对 V 模型 的 改进 ,X 模型 提出 针对 单独 的 程序 片段 进行 相互 分 离 的 编码 
和 测试 ,此 后 通过 频繁 交接 ,最 终 集成 为 可 执行 的 程序 ,如 图 2-6 所 示 。 

X 模 型 的 左边 描述 的 是 针对 单独 程序 片段 所 进行 的 相互 分 离 的 编码 和 测试 ,此 后 将 
进行 频繁 交接 ,通过 集成 最 终 成 为 可 执行 的 程序 ,然后 再 对 这 些 可 执行 程序 进行 测试 。 已 
通过 集成 测试 的 成 品 可 以 进行 封装 并 提交 给 用 户 , 也 可 以 作为 更 大 规模 和 范围 内 集成 的 
一 部 分 。 多 根 并 行 的 曲线 表示 变更 可 以 在 各 个 部 分 发 生 。 由 图 2-6 可 见 ,X 模型 还 定位 
了 探索 性 测试 ,这 是 不 进行 事先 计划 的 特殊 类 


型 的 测试 ,这 一 方式 往往 能 帮助 有 经 验 的 测试 ”竹子 1 县 


封 版 


测试 设计 执行 测试 
人 员 在 测试 计划 之 外 发 现 更 多 的 软件 错误 。 但 下 中 МЫ 
是 这 样 可 能 对 测试 造成 人 力 、 物 力 和 财力 的 浪 faii 
费 ,对 测试 员 的 熟练 程度 要 求 比较 高 。 шн 4. 
а: 


5. 前 置 模型 执行 测试 
工具 配置 

前 置 测 试 是 一 个 将 测试 和 开发 紧密 结合 的 。 测试 设计 
模型 ,该 模型 提供 了 轻松 的 方式 ,可 以 使 项 目 开 程序 片段 
发 加 快速 度 , 如 图 2-7 所 示 。 2-6 义 模 型 


探索 性 测试 


зе 执行 测试 
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ITE o НЕ 系统 分 析 
人 报告 


系统 设计 


技术 测试 


计划 
Рета р 
ийе Ж. 
黑 /| 元 
+ | 集成 测试 
系统 测试 
执行 专项 测试 а 
! 编码 、 调试 | 
验收 测试 QANA FERGE Д 
图 2-7 前 置 模型 


前 置 模型 体现 了 下 列 要 点 。 

D 开发 和 测试 相 结合 

前 置 模型 将 开发 和 测试 的 生命 周期 整合 在 一 起 ,标识 了 项 目 生 命 周期 从 开始 到 结束 
之 间 的 关键 行为 。 并 且 表 示 了 这 些 行为 在 项 目 周期 中 的 价值 所 在 。 如 果 其 中 有 些 行为 没 
有 得 到 很 好 的 执行 ,那么 项 目 成 功 的 可 能 性 就 会 因此 而 有 所 降低 。 如 果 有 业务 需求 , 则 系 
统 开发 过 程 将 更 有 效率 。 我 们 认为 在 没有 业务 需求 的 情况 下 进行 开发 和 测试 是 不 可 能 
的 。 而且, 业务 需求 最 好 在 设计 和 开发 之 前 就 被 正确 定义 。 

2) 对 每 一 个 交付 内 容 进 行 测试 

每 一 个 交付 的 开发 结果 都 必须 通过 一 定 的 方式 进行 测试 。 源 程序 代码 并 不 是 唯一 需 
要 测试 的 内 容 。 在 图 2-7 中 的 被 圈 框 表示 了 其 他 一 些 要 测试 的 对 象 ,包括 可 行 性 报告 、 业 
务 需求 说 明 以 及 系统 设计 文档 等 。 这 同 V 模型 中 开发 和 测试 的 对 应 关系 是 相 一 致 的 ,并 
且 在 其 基础 上 有 所 扩展 , 变 得 更 为 明确 。 

前 置 模型 包括 两 项 测试 计划 技术 。 甚 中 的 第 一 项 技术 是 开发 基于 需求 的 测试 用 例 ， 
这 并 不 仅仅 是 为 以 后 提交 上 来 的 程序 的 测试 做 好 初始 化 准备 ,也 是 为 了 验证 需求 是 否 是 
可 测试 的 。 这 些 测试 可 以 交 由 用 户 进行 验收 测试 ,或 者 由 开发 部 门 做 某 些 技术 测试 。 很 
多 测试 团体 都 认为 ,需求 的 可 测试 性 即使 不 是 需求 首要 的 属性 ,也 应 是 其 最 基本 的 属性 之 
一 。 因 此 ,在 必要 的 时 候 可 以 为 每 一 个 需求 编写 测试 用 例 。 不 过 ,基于 需求 的 测试 最 多 也 
只 是 和 需求 本 身 一 样 重要 。 一 项 需求 可 能 本 身 是 错误 的 ,但 它 仍 是 可 测试 的 。 而 且 , 你 无 
法 为 一 些 被 忽略 的 需求 来 编写 测试 用 例 。 第 二 项 技术 是 定义 验收 标准 。 在 接受 交付 的 系 
统 之 前 ,用 户 需 要 用 验收 标准 来 进行 验证 。 验 收 标准 并 不 仅仅 是 定义 需求 ,还 应 在 前 置 测 
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试 之 前 进行 定义 ,这 将 帮助 揭示 某 些 需 求 是 否 正确 ,以 及 某 些 需求 是 否 被 忽略 了 。 
6. 几 种 模型 比较 


前 面 介绍 了 几 种 典型 的 测试 模型 ,应 该 说 这 些 模型 对 指导 测试 工作 的 进行 具有 重要 
意义 ,但 任何 模型 都 不 是 完美 的 。 应 该 尽 可 能 地 去 应 用 模型 中 对 项 目 有 实用 价值 的 方面 ， 
但 不 强行 地 为 使 用 模型 而 使 用 模型 ,否则 也 没有 实际 意义 。 

在 这 些 模型 中 ,V 模型 强调 了 在 整个 软件 项 目 开发 中 需要 经 历 的 若干 个 测试 级 别 ， 
而 且 每 一 个 级 别 都 与 一 个 开发 级 别 相对 应 ,但 它 忽 略 了 测试 的 对 象 不 应 该 仅仅 包括 程序 ， 
或 者 说 它 没 有 明确 地 指出 应 该 对 软件 的 需求 ,设计 进行 测试 ,而 这 一 点 在 W 模型 中 得 到 
了 补充 。W 模型 强调 了 测试 计划 等 工作 的 先行 和 对 系统 需求 和 系统 设计 的 测试 ,但 W 
模型 和 V 模型 一 样 也 没有 专门 对 软件 测试 流程 予以 说 明 , 因 为 事实 上 , 随 着 软件 质量 要 
求 越 来 越 为 大 家 所 重视 ,软件 测试 也 逐步 发 展 成 为 一 个 独立 于 软件 开发 的 一 系列 活动 ,就 
每 一 个 软件 测试 的 细节 而 言 , 它 都 有 一 个 独立 的 操作 流程 。 比 如 ,现在 的 第 三 方 测试 ,就 
包含 了 从 测试 计划 和 测试 用 例 编写 ,到 测试 实施 以 及 测试 报告 编写 的 全 过 程 ,这 个 过 程 在 
H 模型 中 得 到 了 相应 的 体现 ,表现 为 测试 是 独立 的 。 也 就 是 说 ,H 模型 强调 测试 是 独立 
的 ,只 要 测试 前 提 具 备 了 ,就 可 以 开始 进行 测试 了 。X 模型 提出 针对 单独 的 程序 片段 进行 
相互 分 离 的 编码 和 测试 ,然后 经 过 频繁 交接 ,通过 集成 最 终 合 成 为 可 执行 的 程序 。 前 置 模 
型 体现 了 开发 与 测试 的 结合 ,要 求 对 每 个 交付 的 内 容 进行 测试 。 

因此 ,在 实际 的 工作 中 ,要 灵活 地 运用 各 种 模型 的 优点 ,并 同时 将 测试 与 开发 紧密 结 
合 , 寻 找 恰当 的 就 绪 点 开始 测试 并 反复 迭代 测试 ,最 终 保证 按期 完成 预定 任务 。 


2.3 软件 测试 过 程 


软件 测试 过 程 的 先后 顺序 可 以 分 为 单元 测试 、 集 成 测试 确认 测试 .系统 测试 ,验收 测 
试 等 阶段 。 软 件 测试 过 程 如 图 2-8 所 示 。 


被 测 模块 \ 测试 
图 2-8 软件 测试 过 程 


1. 单元 测试 
单元 测试 (Unit Testing) ,又 称 模块 测试 。 在 软件 测试 的 开始 阶段 进行 的 测试 ,是 软 
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件 开发 过 程 中 要 进行 的 最 低级 别 的 测试 活动 ,或 者 说 是 针对 软件 设计 的 最 小 单位 程序 模 
块 进行 的 测试 工作 。 其 目的 在 于 发 现 每 个 程序 模块 内 部 可 能 存在 的 差错 。 单 元 测试 是 开 
发 者 编写 的 一 小 段 代 码 ,用 于 检验 被 测 代码 的 一 个 很 小 的 、 很 明确 的 功能 是 否 正确 。 通 常 
言 ,一 个 单元 测试 用 于 判断 某 个 特定 条 件 ( 或 者 场景 ) 下 某 个 特定 函数 的 行为 。 

单元 测试 是 由 开发 人 员 自 己 来 完成 ,最 终 受 益 的 也 是 开发 人 员 自 己 。 进 行 单元 测试 ， 
就 是 为 了 证 明 这 段 代码 的 行为 和 期 望 的 一 致 。 对 于 开发 人 员 来 说 ,如 果 养 成 了 对 自己 写 
的 代码 进行 单元 测试 的 习惯 ,不 但 可 以 写 出 高 质量 的 代码 ,而 且 还 能 提高 编程 水 平 。 

单元 测试 具有 如 下 特征 : 

(1) 单元 测试 是 针对 软件 设计 的 最 小 单位 程序 模块 进行 。 

(2) 单元 测试 的 执行 率 100% 。 

(3) 单元 测试 提升 了 软件 系统 的 可 信和 度 。 

(4) 单元 测试 包括 对 可 能 出 现 问题 的 代码 进行 排查 。 

(5) 单元 测试 准确 反映 代码 的 变化 便于 后 期 维护 。 


2. 集成 测试 


集成 测试 (Integration Testing) ,也 称 为 组 装 测试 或 联合 测试 。 集 成 就 是 把 多 个 单元 
组 合 起 来 形成 更 大 的 单元 。 在 单元 测试 的 基础 上 ,将 所 有 模块 按照 设计 要 求 组 装 成 为 子 
系统 或 系统 ,进行 集成 测试 。 通 过 实践 发 现 ,一 些 模块 虽然 能 够 单独 工作 ,但 并 不 能 保证 
连接 起 来 也 能 正常 工作 。 程 序 在 某 些 局 部 反映 不 出 来 的 问题 ,在 全 局 上 很 可 能 暴露 出 来 ， 
影响 功能 的 实现 。 

集成 测试 的 最 简单 的 形式 是 : 两 个 已 经 测试 过 的 单元 组 合成 一 个 组 件 , 并 且 测 试 它 
们 之 间 的 接口 。 从 这 一 层 意 义 上 讲 , 组 件 是 指 多 个 单元 的 集成 聚合 。 在 现实 方案 中 ,许多 
单元 组 合成 组 件 ,而 这 些 组 件 又 聚合 成 程序 的 更 大 部 分 。 方 法 是 测试 片段 的 组 合 ,并 最 终 
扩展 进程 ,将 您 的 模块 与 其 他 组 的 模块 一 起 测试 。 最 后 ,将 构成 进程 的 所 有 模块 一 起 测 
试 。 此 外 ,如 果 程 序 由 多 个 进程 组 成 ,应 该 成 对 测试 它们 ,而 不 是 同时 测试 所 有 进程 。 

集成 测试 分 为 非 渐 增 式 集成 和 渐 增 式 集成 。 非 渐 增 式 集成 先 分 别 测试 每 个 模块 ,再 
把 所 有 模块 按 设计 要 求 放 在 一 起 结合 成 所 要 的 程序 。 渐 增 式 集成 把 下 一 个 要 测试 的 模块 
同 已 经 测试 好 的 模块 结合 起 来 进行 测试 ,然后 再 把 下 一 个 待 测试 的 模块 结合 起 来 进行 测 
试 ,同时 完成 单元 测试 和 集成 测试 。 渐 增 式 集成 测试 具体 又 分 为 自 底 向 上 集成 测试 、 自 顶 
向 下 集成 测试 三 明治 集成 测试 等 。 


3. 确认 测试 


确认 测试 (Validation Testing) 又 称 有 效 性 测试 或 合格 性 测试 。 其 目的 是 对 软件 产品 
进行 评估 以 确定 其 是 否 满足 软件 需求 的 过 程 。 确 认 测 试 一 般 通 过 一 系列 黑 盒 测试 来 实现 
软件 确认 。 在 测试 时 一 般 不 由 软件 开发 人 员 执 行 ,而 应 由 软件 企业 中 独立 的 测试 部 门 或 
第 三 方 测试 机 构 来 完成 。 

经 过 集成 测试 以 后 ,各 个 模块 已 经 按照 设计 要 求 组 装 成 一 个 完整 的 软件 系统 ,各 个 模 
块 间 存 在 的 问题 基本 解决 。 为 了 验证 软件 的 有 效 性 ,要 对 它 的 功能 和 性 能 等 方面 做 进 一 
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步 的 评价 ,就 需要 确认 测试 。 确 认 测试 结束 后 要 给 出 一 个 完整 评价 ,包括 测试 其 功能 和 性 
能 等 方面 是 否 满足 需求 规格 说 明 的 要 求 ,产生 一 个 缺陷 清单 ,与 开发 部 门 协商 出 一 个 解决 
办 法 。 


4. 系统 测试 


系统 测试 (System Testing) 是 针对 整个 产品 系统 进行 的 测试 ,其 目的 是 验证 系统 是 
和 否 满足 了 需求 规格 的 定义 , 找 出 与 需求 规格 不 相符 合 或 与 之 矛盾 的 地 方 。 系 统 测试 的 对 
象 不 仅仅 包括 需要 测试 的 产品 系统 的 软件 ,还 要 包含 软件 所 依赖 的 硬件 .外 设 等 。 系 统 测 
试 实际 上 是 针对 系统 中 各 个 组 成 部 分 进行 的 综合 性 检验 ,很 接近 人 们 的 日 常 测试 实践 。 

系统 测试 的 目标 是 确保 系统 测试 的 活动 是 按 计划 进行 ;验证 软件 产品 是 否 与 系统 需 
求 用 例 不 相符 合 ;建立 完善 的 系统 测试 缺陷 记录 跟踪 库 ;确保 软件 系统 测试 活动 及 其 结果 
及 时 通知 有 关 人 员 。 

一 般 可 以 把 系统 测试 的 过 程 划 分 为 五 个 阶段 : 测试 计划 阶段 .测试 用 例 分 析 和 设计 
阶段 ,测试 实施 阶段 ,测试 执行 阶段 分析 评 估 阶 段 。 

1) 测试 计划 阶段 

系统 测试 计划 的 好 与 坏 影 响 着 后 续 测试 工作 的 进行 ,系统 测试 计划 的 制定 对 系统 测 
试 的 顺利 实施 起 着 至 关 重 要 的 作用 。 一 般 是 由 测试 经 理 依据 系统 需求 规约 和 系统 需求 分 
析 规 约 并 结合 项 目 计 划 来 制定 ,有 时 系统 测试 计划 也 需要 项 目的 管理 者 和 测试 技术 人 员 
参与 。 

2) 测试 用 例 分 析 和 设计 阶段 

在 参考 系统 测试 计划 、 系 统 需求 规约 及 需求 分 析 规 约 的 基础 上 ,对 系统 进行 测试 分 
析 。 本 阶段 工作 主要 由 测试 技术 人 员 来 完成 。 

3) 测试 实施 阶段 

这 个 阶段 的 主要 工作 是 搭建 测试 环境 ,准备 测试 工具 、 测 试 开发 及 脚本 的 录制 ,可 能 
还 会 涉及 必要 的 相关 培训 ,如 工具 的 培训 等 。 另 外 ,本 阶段 需要 确定 系统 测试 的 软件 版 本 
基线 。 

4) 测试 执行 阶段 

本 阶段 主要 是 完成 测试 用 例 的 执行 .记录 、 问 题 跟踪 修改 等 工作 。 

5) 分 析 评估 阶段 

当 系 统 测 试 执行 结束 后 ,要 召集 相关 人 员 , 如 测试 设计 人 员 、 系 统 设 计 人 员 等 对 测试 
结果 进行 评估 形成 一 份 系统 测试 分 析 报 告 ,测试 结果 数据 来 源 于 手工 记录 或 自动 化 工具 
的 记录 ,以 确定 系统 测试 是 否 通过 。 系 统 测试 的 方法 很 多 ,如 性 能 测试 .压力 测试 .容量 测 
试 . 安 全 性 测试 .可 靠 性 测试 .健壮 性 测试 .兼容 性 测试 .可 用 性 测试 .安装 性 测试 .容错 性 
测试 .配置 测试 . 冒 烟 测 试 .GUI 测试 .文档 测试 、 网 站 测试 .恢复 性 测试 .协议 测试 等 。 


5. 验收 测试 


验收 测试 (Verification Testing) 即 通过 测试 发 现 错误 ,报告 异常 情况 ,提出 批评 意 
见 ,然后 再 进行 改 错 和 完善 .并 修正 。 验 收 测试 目的 : 向 用 户 表明 所 开发 的 软件 系统 能 够 
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像 用 户 所 预定 的 那样 工作 。 软 件 测试 活动 是 技术 测试 的 最 后 一 个 阶段 ,也 称 为 交付 
测试 。 

验收 测试 的 主要 任务 : 

(1) 明确 规定 验收 测试 通过 的 标准 。 

(2) 确定 验收 测试 方法 。 

(3) 确定 验收 测试 的 组 织 和 可 利用 的 资源 。 

(4) 确定 测试 结果 的 分 析 方 法 。 

(5) 制定 验收 测试 计划 并 进行 评审 。 

(6) 设计 验收 测试 的 测试 用 例 。 

(7) 审查 验收 测试 的 准备 工作 。 

(8) 执行 验收 测试 。 

(9) 分 析 测 试 结果 ,决定 是 否 通过 验收 。 

验收 测试 在 测试 项 目 小 组 的 协助 下 ,由 用 户 代 表 执 行 ,测试 人 员 在 验收 测试 阶段 将 协 
助 用 户 代表 进行 测试 ,并 向 用 户 解 释 测试 用 例 的 结果 。 


2.4 软件 测试 基本 理论 


本 节 首 先 介 绍 软件 测试 用 例 设 计 的 概念 .重要 性 和 如 何 设计 ;然后 介绍 软件 测试 的 基 
本 方法 ,包括 静态 测试 .动态 测试 . 黑 盒 测试 . 白 盒 测 试 和 灰 盒 测 试 等 ;最 后 是 软件 测试 过 
程 中 应 该 避免 进入 的 误区 。 


2.4.1 软件 测试 用 例 设计 


在 讲解 软件 测试 用 例 设 计 之 前 , 先 举 一 个 例子 。 当 测试 登录 如 图 2-9 所 示 的 网 易 邮 
箱 时 ,需要 如 何 设计 ? 可 以 尝试 不 同 的 电子 邮件 和 
密码 的 组 合 进行 测试 ,例如 ; асаана lise 
(1) 输入 正确 的 电子 邮件 和 正确 的 密码 ,成 功 | | 
登录 。 
(2) 输入 正确 的 电子 邮件 和 错误 的 密码 ,登录 
失败 。 O 十 天 汶 揭 登录 шеше 
(3) 输入 错误 的 电子 邮件 和 正确 的 密码 ,登录 
失败 。 
(4) 输入 错误 的 电子 邮件 和 错误 的 密码 ,登录 图 2-9 网 易 邮件 登录 界面 
失败 。 
(5) 不 输入 电子 邮件 和 正确 的 密码 , 单 击 “ 登 录 ” 按 钮 ,登录 失败 。 


ж ж 


上 面 每 一 种 测试 组 合 都 是 一 个 测试 用 例 ,做 任何 测试 都 要 首先 设计 测试 用 例 。 而 设 
计 测 试用 例 的 具体 方法 需要 根据 是 白 盒 测试 还 是 黑 盒 测 试 , 是 语句 覆盖 测试 还 是 路 径 覆 
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盖 测 试 , 具 体 问题 具体 分 析 。 
1. 测试 用 例 的 概念 


测试 用 例 (Test Case) 指 对 一 项 特定 的 软件 产品 进行 测试 任务 的 描述 ,体现 测试 方 
案 方法 .技术 和 策略 。 内 容 包括 测 试 目标 、 测 试 环境 .输入 数据 ,测试 步骤 、 预 期 结果 、 测 
试 脚本 等 ,并 形成 文档 。 

测试 用 例 是 为 某 个 特殊 目标 而 编制 的 一 组 测试 输入 执行 条 件 以 及 预期 结果 ,以 便 测 
试 某 个 程序 路 径 或 核实 是 否 满足 某 个 特定 需求 。 测 试用 例 是 对 软件 测试 的 行为 活动 做 一 
个 科学 化 的 组 织 归 纳 ,目的 是 将 软件 测试 的 行为 转化 成 可 管理 的 模式 ;同时 测试 用 例 也 是 
将 测试 具体 量化 的 方法 之 一 ,不 同类 别 的 软件 ,测试 用 例 是 不 同 的 。 

要 使 最 终 用 户 对 软件 感到 满意 ,最 有 力 的 举措 就 是 对 最 终 用 户 的 期 望 加 以 明确 阐述 ， 
以 便 对 这 些 期 望 进行 核实 并 确认 其 有 效 性 。 测 试用 例 反映 了 要 核实 的 需求 。 然 而 ,核实 
这 些 需求 可 能 通过 不 同 的 方式 并 由 不 同 的 测试 员 来 实施 。 例 如 ,执行 软件 以 便 验 证 它 的 
功能 和 性 能 ,这 项 操作 可 能 由 某 个 测试 员 采 用 自动 测试 技术 来 实现 ;计算 机 系统 的 关机 步 
又 可 通过 手工 测试 和 观察 来 完成 ;不 过 ,市 场 占 有 率 和 销售 数据 (以 及 产品 需求 ), 只 能 通 
过 评测 产品 和 竞争 销售 数据 来 完成 。 

既然 可 能 无 法 (或 不 必 有 负责 核实 所 有 的 需求 ,那么 是 否 能 为 测试 挑选 最 适合 或 最 关 
键 的 需求 则 关系 到 项 目的 成 败 。 选 中 要 核实 的 需求 将 是 对 成 本 、 风 险 和 对 该 需求 进行 核 
实 的 必要 性 这 三 者 权衡 考虑 的 结果 。 


2. 测试 用 例 的 重要 性 


测试 用 例 构 成 了 设计 和 规划 测试 过 程 的 基础 。 测 试 工作 量 与 测试 用 例 的 数量 成 比 
例 。 有 了 全 面 且 细 化 的 测试 用 例 , 可 以 更 准确 地 估计 测试 周期 各 连续 阶段 的 时 间 安 排 。 

测试 用 例 是 软件 测试 的 核心 ,软件 测试 的 重要 性 是 毋庸 置疑 的 。 但 如 何以 最 少 的 人 
力 资源 投入 ,在 最 短 的 时 间 内 完成 测试 ,发 现 软件 系统 的 缺陷 ,保证 软件 的 优良 品质 , 则 
是 软件 公司 探索 和 追求 的 目标 。 每 个 软件 产品 或 软件 开发 项 目 都 需要 有 一 套 优秀 的 测试 
方案 和 测试 方法 。 

影响 软件 测试 的 因素 很 多 ,例如 软件 本 身 的 复杂 程度 、 开 发 人 员 (包括 分 析 、 设 计 \ 编 
程 和 测试 的 人 员 ) 的 素质 、 测 试 方法 和 技术 的 运用 等 。 因 为 有 些 因素 是 客观 存在 的 ,无 法 
避免 。 有 些 因素 则 是 波动 的 ,不 稳定 的 ,例如 开发 队伍 是 流动 的 ,有 经 验 的 走 了 ,新 人 不 断 
补充 进来 ;一 个 具体 的 人 工作 也 受 情绪 等 影响 ,等 等 。 如 何 保障 软件 测试 质量 的 稳定 ? 有 
了 测试 用 例 , 无 论 是 谁 来 测试 ,参照 测试 用 例 实施 ,都 能 保障 测试 的 质量 。 可 以 把 人 为 因 
素 的 影响 减少 到 最 小 。 即 便 最 初 的 测试 用 例 考 虑 不 周全 , 随 着 测试 的 进行 和 软件 版 本 更 
新 ,也 将 日 趋 完善 。 


3. 测试 用 例 的 设计 方法 


于 穷 举 测试 是 不 可 能 的 , 故 测试 人 员 应 从 数量 极 大 的 可 用 测试 用 例 中 精心 挑选 数 
量 有 限 的 具有 代表 性 或 特殊 性 的 测试 用 例 ,以 高 效 地 揭露 程序 或 软件 中 的 错误 。 
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设计 测试 用 例 的 基本 准则 如 下 所 述 。 

准则 一 : 测试 用 例 的 代表 性 。 

准则 二 : 测试 用 例 的 非 重复 性 。 

准则 三 : 测试 结果 的 可 判定 性 。 

准则 四 : 测试 结果 的 可 再 现 性 。 

D 白 盒 技术 

由 于 白 盒 测试 是 结构 测试 ,所 以 被 测 对 象 基本 上 是 源 程序 ,以 程序 的 内 部 逻辑 为 基础 
设计 测试 用 例 。 

程序 内 部 的 逻辑 覆盖 程度 , 当 程序 中 有 循环 时 ,覆盖 每 条 路 径 是 不 可 能 的 ,要 设计 使 
覆盖 程度 较 高 的 或 覆盖 最 有 代表 性 的 路 径 的 测试 用 例 。 下 面 分 别 介绍 几 种 常用 的 覆盖 
技术 。 

(1) 语句 覆盖 。 

为 了 提高 发 现 错误 的 可 能 性 ,在 测试 时 应 该 执行 到 程序 中 的 每 一 个 语句 。 语 句 覆 盖 
是 指 设计 足够 的 测试 用 例 ,使 被 测试 程序 中 每 个 语句 至 少 执行 一 次 。 

(2) 判定 覆盖 。 

判定 覆盖 指 设计 足够 的 测试 用 例 ,使 得 被 测 程序 中 每 个 判定 表达 式 至 少 获得 一 次 
“ 真 ” 值 和 “ 假 ” 值 ,从 而 使 程序 的 每 一 个 分 支 至 少 都 通过 一 次 ,因此 判定 覆盖 也 称 分 支 
覆盖 。 

(3) ЖИВ. 

条 件 覆 盖 是 指 设计 足够 的 测试 用 例 ,使 得 判定 表达 式 中 每 个 条 件 的 各 种 可 能 的 值 至 
少 出 现 一 次 。 

(4) 判定 /条 件 测试 。 

该 覆盖 标准 指 设计 足够 的 测试 用 例 ,使 得 判定 表达 式 的 每 个 条 件 的 所 有 可 能 取 值 至 
少 出 现 一 次 ,并 使 每 个 判定 表达 式 所 有 可 能 的 结果 也 至 少 出 现 一 次 。 

(5) 条 件 组 合 覆 盖 。 

条 件 组 合 覆盖 是 比较 强 的 覆盖 标准 , 它 是 指 设计 足够 的 测试 用 例 ,使 得 每 个 判定 表达 
式 中 条 件 的 各 种 可 能 的 值 的 组 合 都 至 少 出 现 一 次 。 

(6) 路 径 覆 盖 。 

路 径 覆 盖 是 指 设计 足够 的 测试 用 例 ,覆盖 被 测 程序 中 所 有 可 能 的 路 径 。 

2) 黑 盒 技术 

(1) 等 价 类 划分 。 

划分 等 价 类 ,确定 有 效 等 价 类 和 无 效 等 价 类 ,确定 测试 用 例 ,为 每 一 个 等 价 类 编号 。 

(2) 边界 值 分 析 。 

使 用 边界 值 分 析 方 法 设计 测试 用 例 时 一 般 与 等 价 类 划分 结合 起 来 。 但 它 不 是 从 一 个 
等 价 类 中 任 选 一 个 例子 作为 代表 ,而 是 将 测试 边界 情况 作为 重点 目标 ,选取 正好 等 于 、 刚 
刚 大 于 或 刚刚 小 于 边界 值 的 测试 数据 。 
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4. 测试 用 例 设 计 的 误区 


(1) 作为 测试 实施 依据 的 测试 用 例 ,必须 要 能 完整 覆盖 测试 需求 ,而 不 应 该 针对 单个 
的 测试 用 例 去 评判 好 坏 。 

(2) 测试 用 例 应 该 给 出 所 有 的 操作 信息 ,使 一 个 没有 接触 过 系统 的 人 员 也 能 进行 
测试 。 

(3) 测试 用 例 设 计 是 一 劳 永 逸 的 事情 。 

这 和 句 话 可 能 没有 一 个 人 会 同意 ,但 在 实际 情况 中 , 却 经 常 能 发 现 这 种 想法 的 影子 。 导 
致 的 后 果 是 测试 用 例 和 缺陷 报告 成 了 废 纸 一 堆 。 另 外 ,认为 设计 测试 用 例 是 一 次 性 投入 ， 
片面 追求 测试 用 例 设计 一 步 到 位 ,导致 设计 的 测试 用 例 与 需求 和 设计 不 同步 的 情况 在 实 
际 开 发 过 程 屡屡 出 现 。 

几乎 所 有 软件 项 目的 开发 过 程 都 处 于 不 断 变化 过 程 中 。 设 计 软 件 测 试用 例 与 软件 开 
发 设计 并 行进 行 ,必须 根据 软件 设计 的 变化 ,对 软件 测试 用 例 进 行内 容 的 调整 和 数量 的 增 
减 ,增加 一 些 针 对 软件 新 增 功能 的 测试 用 例 ,删除 一 些 不 再 适用 的 测试 用 例 ,修改 那些 模 
块 代码 更 新 了 的 测试 用 例 。 

(4) 好 的 用 例 是 能 发 现 未 知 BUG 的 用 例 。 

这 句 话 其 实 是 很 有 道理 的 ,然而 很 多 测试 人 员 都 曲解 了 这 句 话 的 原意 。 他 们 把 测试 
用 例 视 为 孤立 的 个 例 ,盲目 追求 设计 “难于 发 现 的 缺陷 ”的 用 例 ,忘记 了 测试 的 目标 是 尽 可 
能 发 现 程序 中 存在 的 缺陷 。 

(5) 让 新 手 设计 测试 用 例 即 可 。 

实际 工作 中 经 常 让 测试 新 手 设计 测试 用 例 , 新 手 往往 感到 无 从 下 手 。 实 际 上 ,测试 新 
手 设计 的 测试 用 例 往往 存在 设计 出 的 测试 用 例 对 软件 功能 和 特性 的 覆盖 度 不 高 ,功能 设 
计 的 颗粒 度 不 合理 \ 可 复 用 性 差 等 诸多 缺陷 。 软 件 测试 用 例 设计 是 软件 测试 的 中 高 级 技 
能 ,不 是 每 个 人 (尤其 是 测试 新 手 ) 都 可 以 编写 的 ,测试 用 例 编写 者 不 仅 要 掌握 软件 测试 的 
技术 和 流程 ,而 且 要 对 被 测 软件 的 需求 、 功 能 规格 说 明 以 及 程序 结构 等 有 比较 透彻 的 理 
解 。 我 们 建议 安排 经 验 丰富 的 测试 人 员 进行 测试 用 例 设计 ,测试 新 手 可 以 从 执行 测试 用 
例 开始 , 随 着 测试 人 员 的 测试 技术 的 提高 和 对 被 测 软 件 的 熟悉 ,可 以 学 习 测 试 经 验 丰富 的 
测试 人 员 的 用 例 设 计 经 验 ,尝试 编写 测试 用 例 。 

测试 用 例 设计 好 以 后 ,还 需要 不 断 地 改进 ,比如 发 现 了 新 的 缺陷 以 后 ,应 及 时 补充 新 
的 测试 用 例 ,以 期 达到 好 的 测试 效果 。 


2.4.2 软件 测试 方法 


在 诸多 软件 测试 方法 中 ,本 节 主 要 给 出 了 静态 测试 ,动态 测试 . 白 盒 测试 . 黑 盒 测试 和 
灰 盒 测 试 的 基本 概念 ,具体 的 操作 或 实现 方法 将 在 后 面 介 绍 。 
1. 静态 测试 


静态 测试 (Static Testing) , 指 测试 时 不 运行 的 部 分 ,例如 测试 产品 说 明 书 ,对 此 进行 
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检查 和 审阅 。 静 态 方法 是 指 不 运行 被 测 程序 本 身 , 仅 通过 分 析 或 检查 源 程序 的 文法 、 结 
构 、 过 程 、 接 口 等 来 检查 程序 的 正确 性 。 静 态 方 法 通过 程序 静态 特性 的 分 析 , 找 出 欠缺 和 
可 疑 之 处 。 静态 测试 结果 可 用 于 进一步 查 错 , 并 为 测试 用 例 选取 提供 指导 。 静 态 测 试 常 
用 工具 有 LogiScope、TestWork 等 。 

1) 静态 测试 可 能 发 现 的 程序 缺陷 

(1) 不 匹配 的 参数 。 

(2) 不 适当 的 循环 嵌 套 和 分 支 嵌 套 。 

(3) 不 允许 的 递归 。 

(4) 未 定义 过 的 变量 。 

(5) 空 指针 的 引用 和 可 疑 的 计算 。 

(6) 遗漏 的 符合 和 代码 。 

(7) 无 终止 的 死 循环 。 

2) 静态 测试 可 能 发 现 的 程序 中 潜在 的 问题 

(1) 未 使 用 过 的 变量 。 

(2) 无 法 执行 到 的 代码 。 

(3) 可 疑 的 代码 。 

(4) 潜在 的 死 循环 。 


2. 动态 测试 


动态 测试 (Dynamic Testing) , 指 的 是 实际 运行 被 测 程序 ,输入 相应 的 测试 数据 ,检查 
实际 输出 结果 和 预期 结果 是 否 相符 的 过 程 ,所 以 判断 一 个 测试 属于 动态 测试 还 是 静态 测 
试 的 唯一 的 标准 就 是 看 是 否 运 行程 序 。 

动态 测试 是 通过 观察 代码 运行 时 的 动作 ,来 提供 执行 跟踪 .时间 分 析 以 及 测试 覆盖 度 
方面 的 信息 。 动 态 测试 通过 真正 运行 程序 发 现 错误 。 


з. Вай 


白 盒 测 试 (White Вох Testing) , 白 盒 测试 又 称 结构 测试 或 者 逻辑 驱动 测试 。 白 盒 测 

试 是 把 测试 对 象 视 为 一 个 打开 的 盒子 。 利 用 和 白 盒 测试 法 进行 动态 测试 时 ,需要 测试 软件 
品 的 内 部 结构 和 处 理 过 程 , 无 须 测试 软件 产品 的 功能 。 

白 盒 测 试 法 的 覆盖 标准 有 逻辑 覆盖 、 循 环 覆 盖 和 基本 路 径 测试 。 其 中 逻辑 覆盖 包括 
语句 覆盖 、 判 定 覆 盖 、 条 件 覆 盖 、 判 定 / 条 件 覆盖 条件 组 合 覆盖 和 路 径 覆 盖 。 

白 盒 测 试 是 知道 产品 内 部 工作 过 程 .可 通过 测试 来 检测 产品 内 部 动作 是 否 按照 规格 
说 明 书 的 规定 正常 进行 ,按照 程序 内 部 的 结构 测试 程序 ,检验 程序 中 的 每 条 通路 是 否 都 有 
能 按 预 定 要 求 正 确 工作 ,而 不 顾 它 的 功能 , 白 盒 测试 的 主要 方法 有 逻辑 驱动 . 基 路 测试 等 ， 
主要 用 于 软件 验证 。 白 盒 测 试 常用 工具 有 Jtest\C++ Test, Logiscope 等 。 
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4. 黑 盒 测试 


黑 盒 测试 (Black Вох Testing) , 黑 盒 测试 又 称 功能 测试 或 者 数据 驱动 测试 。 黑 盒 测 
试 是 根据 软件 的 规格 对 软件 进行 的 测试 ,这 类 测试 不 考虑 软件 内 部 的 运作 原理 ,因此 软件 
对 用 户 来 说 就 像 一 个 黑 盒子 ,如 图 2-10 所 示 。 


程序 
输入 > | C- 一 一 > 输出 


图 2-10 Жай 


软件 测试 人 员 以 用 户 的 角度 ,通过 各 种 输入 和 观察 软件 的 各 种 输出 结果 来 发 现 软件 
存在 的 缺陷 ,而 不 关心 程序 具体 如 何 实现 的 一 种 软件 测试 方法 。 黑 盒 测试 常用 工具 有 


WinRunner, LoadRunner、AutoRunner 等 。 
5. ЖЕЛІН 


灰 盒 测试 (Gray box Testing) ,单纯 从 名 称 上 来 看 , 灰 盒 测试 是 介 于 黑 盒 测试 与 白 盒 
测试 之 间 的 一 种 测试 方式 。 灰 盒 测 试 是 基于 程序 运行 时 的 外 部 表现 同时 又 结合 程序 内 部 
人 逻辑 结构 来 设计 用 例 , 执 行程 序 并 采集 程序 路 径 执行 信息 和 外 部 用 户 接 口 结果 的 测试 
技术 。 


2.4.3 软件 测试 的 误区 


软件 测试 是 软件 质量 的 重要 保证 ,国内 外 著名 的 软件 企业 对 软件 测试 工作 十 分 重视 。 
在 软件 开发 中 发 现 缺 陷 越 多 ,对 软件 质量 就 越 有 保障 。 所 以 ,软件 测试 在 软件 项 目 实施 过 
程 中 的 重要 性 日 益 突出 。 但 是 ,现实 情况 是 ,与 软件 编程 比较 ,软件 测试 的 地 位 和 作用 ,还 
没有 真正 受到 重视 ,对 于 很 多 人 还 存在 对 软件 测试 的 认识 误区 ,这 进一步 影响 了 软件 测试 
活动 开展 和 真正 提高 软件 测试 质量 。 

1. 测试 与 调试 程序 是 一 回 事 

在 软件 开发 过 程 中 调试 和 测试 是 两 个 不 同 的 过 程 ,分 别 由 软件 开发 人 员 和 软件 测试 
人 员 来 承担 。 其 一 ,调试 的 过 程 是 随机 的 ,而 测试 是 有 计划 的 ;其 二 ,调试 的 目的 是 为 了 确 
认 问 题 的 存在 并 且 加 以 解决 :以 使 得 程序 可 以 正常 运行 ,而 测试 的 目的 是 为 了 发 现 与 软件 
系统 规格 和 标准 不 相符 的 问题 ,保证 软件 能 够 满足 用 户 需要 。 二 者 既 有 不 同 点 ,也 有 共同 
之 处 , 即 都 是 为 了 提高 软件 的 质量 。 

2. 忽视 需求 阶段 的 参与 


软件 测试 工作 同时 兼顾 了 * 证 明 软 件 的 实现 和 需求 是 一 致 的 ”和 ”验证 软件 在 某 些 情 
况 下 可 能 会 产生 问题 ”的 两 个 方面 。 因 此 ,测试 人 员 对 需求 的 理解 就 从 另 一 个 角度 影响 了 
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整个 测试 工作 的 可 靠 性 和 效率 。 测 试 人 员 和 开发 人 员 同 时 、 同 等 地 从 上 游 获得 需求 ,并 持 
有 自己 的 理解 ,可 以 排除 部 分 功能 实现 和 需求 错位 的 问题 。 

假设 某 软件 公司 ,需求 文档 本 来 就 不 是 很 完善 ,从 市 场 调研 人 员 到 项 目 经 理 . 开 发 经 
理 、 再 到 具体 的 程序 员 ,每 一 层 之 间 的 传递 都 有 可 能 存在 需求 理解 上 的 偏差 。 让 测试 人 员 
参与 需求 阶段 的 工作 ,可 以 在 一 定 程度 上 起 到 双 保 险 。 


3. 软件 开发 完成 后 进行 软件 测试 


一 般 认为 ,软件 项 目 要 经 过 以 下 几 个 阶段 : 需求 分 析 、 概 要 设计 、 详 细 设计 、 软 件 编 
码 .软件 测试 和 软件 发 布 。 据 此 ,认为 软件 测试 只 是 软件 编码 后 的 一 个 过 程 。 这 是 不 了 解 
软件 测试 周期 的 错误 认识 。 软 件 测试 是 一 个 系列 过 程 活动 ,包括 软件 测试 需求 分 析 、 测 试 
计划 设计 、 测 试用 例 设计 和 执行 测试 。 因 此 ,软件 测试 贯穿 于 软件 项 目的 整个 生命 过 程 。 
在 软件 项 目的 每 一 个 阶段 都 要 进行 不 同 目 的 和 内 容 的 测试 活动 ,以 保证 各 个 阶段 的 正确 
性 。 软 件 测试 的 对 象 不 仅仅 是 软件 代码 ,还 包括 软件 需求 文档 和 设计 文档 。 软 件 开发 与 
软件 测试 应 该 是 交互 进行 的 ,例如 ,单元 编码 需要 单元 测试 ,模块 组 合 阶段 需要 集成 测试 。 
如 果 等 到 软件 编码 结束 后 才 进行 测试 ,那么 ,测试 的 覆盖 面 将 很 不 全 面 ,测试 的 效果 也 将 
大 打折 扣 。 更 严重 的 是 如 果 此 时 发 现 了 软件 需求 阶段 或 概要 设计 阶段 的 错误 ,如 果 要 修 
复 该 类 错误 ,将 会 耗费 大 量 的 时 间 和 人 力 , 其 代价 是 巨大 的 。 


4. 期 望 短期 通过 增加 软件 测试 投入 ,迅速 达到 零 缺陷 率 


即使 有 充裕 的 资金 ,也 不 是 说 软件 测试 投入 得 越 多 越 好 。 增 加 测试 人 力 和 时 间 上 的 
投入 ,的 确 能 找 出 更 多 的 缺陷 。 但 二 者 不 是 一 种 线性 关系 , 随 着 测试 投入 的 不 断 放大 , 产 
品质 量 上 升 是 逐渐 收敛 的 。 一 个 项 目 投入 10 个 测试 人 员 , 发 现 了 70% 的 缺陷 ,并 不 表明 
投入 20 个 人 就 能 找 出 几乎 所 有 的 缺陷 ,也 许 这 个 数字 只 会 是 85%。 所 以 ,根据 公司 的 具 
体 情况 ,如 策略 方针 ,市 场 定位 以 及 产品 类 别 等 因素 ,来 决定 开发 和 测试 人 员 的 比率 和 测 
试 投入 才 是 合理 的 。 


5. 规范 化 软件 测试 使 项 目 成 本 增加 


增加 软件 测试 人 员 和 预 留 项 目测 试 时 间 , 表 面 上 看 是 增加 了 人 员 成 本 或 延长 了 项 目 
周期 ,为 此 会 投入 更 多 的 项 目 资金 。 然 而 , 越 早 发 现 软 件 中 存在 的 问题 ,开发 费用 就 越 低 。 
美国 质量 保证 研究 所 对 软件 测试 的 研究 结果 表明 : 在 编码 后 修改 软件 缺陷 的 成 本 是 编码 
前 的 10 倍 ,在 产品 交付 后 修改 软件 缺陷 的 成 本 是 交付 前 的 ТО 倍 。 软 件 质量 越 高 ,软件 发 
布 后 的 维护 费用 越 低 。 


6. 期 望 用 测试 自动 化 代替 人 工 劳动 


现在 很 多 的 企业 首先 是 从 节约 成 本 的 角度 考虑 去 引入 测试 自动 化 工具 的 。 自 动 化 测 
试 工具 的 确 能 用 于 完成 部 分 重复 .枯燥 的 手工 作业 ,但 不 要 指望 它 来 代替 人 工 测 试 。 一 般 
来 讲 ,产品 化 的 软件 更 适 于 功能 测试 的 自动 化 ,由 标准 模块 组 装 的 系统 更 好 ,因为 其 功能 
稳定 ,界面 变化 不 大 。 不 要 因为 自动 化 测试 工具 前 面 有 “自动 化 ”三 个 字 就 认为 它 的 主要 
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目的 是 来 代 蔡 手 工 劳动 的 。 
7. 软件 测试 是 技术 要 求 不 高 的 岗位 


以 目前 用 人 最 多 的 黑 盒 功 能 测试 岗位 来 说 ,测试 人 员 对 计算 机 技术 的 要 求 也 许可 以 
不 是 很 高 。 但 是 ,测试 人 员 除 了 逻辑 思维 沟通 能 力 等 自身 素质 外 ,技能 暂且 可 分 为 两 种 : 
一 是 行业 知识 ,比如 丰富 的 财务 或 ERP 实施 经 验 ; 另 一 种 是 计算 机 技术 ,如 计算 机 语言 
软件 项 目 经 验 。 好 的 测试 人 员 不 仅 有 程序 设计 基础 ,更 要 有 严谨 的 态度 和 严密 的 思维 , 利 
用 自己 丰富 的 行业 经 验 ,判断 需求 到 系统 功能 的 实现 是 否 合理 。 软 件 测试 需要 站 在 一 定 
高 度 对 软件 框架 .设计 方法 项目 管理 等 做 出 合理 的 建议 。 所 有 这 些 都 说 明 软 件 测试 是 一 
个 对 技术 要 求 很 高 的 行业 。 


8. 软件 发 布 后 如 果 发 现 质量 问题 , 那 是 软件 测试 人 员 的 错 


这 种 认识 对 软件 测试 人 员 的 积极 性 是 一 种 打击 。 软 件 中 的 错误 可 能 来 自 软件 项 目 中 
的 各 个 过 程 ,软件 测试 只 能 确认 软件 存在 错误 ,不 能 保证 软件 没有 错误 ,因为 从 根本 上 讲 ， 
软件 测试 不 可 能 发 现 全 部 的 错误 。 从 软件 开发 的 角度 看 ,软件 的 高 质量 不 是 软件 测试 人 
员 测 出 来 的 ,是 靠 软 件 生命 周期 的 各 个 过 程 中 设计 出 来 的 。 出 现 软 件 错误 ,不 能 简单 地 归 
结 为 某 一 个 人 的 责任 ,有 些 错 误 的 产生 可 能 不 是 技术 原因 ,可 能 来 自 于 混乱 的 项 目 管理 。 
应 该 分 析 软 件 项 目的 各 个 过 程 ,从 过 程 改 进 方面 寻找 产生 错误 的 原因 和 改进 的 措施 。 


9. 软件 测试 是 测试 人 员 的 事情 .与 程序 员 无 关 


一 个 好 的 软件 项 目 需要 软件 测试 人 员 ,程序 员 和 系统 分 析 师 等 保持 密切 的 联系 ,需要 
更 多 的 交流 和 协调 ,以 便 提高 测试 效率 。 另 外 ,对 于 单元 测试 主要 应 该 由 程序 员 完 成 , 必 
要 时 测试 人 员 可 以 帮助 设计 测试 样 例 。 对 于 测试 中 发 现 的 软件 错误 ,很 多 需要 程序 员 通 
过 修改 编码 才能 修复 。 程 序 员 可 以 通过 有 目的 的 分 析 软 件 错误 的 类 型 数量, 找 出 产生 错 
误 的 位 置 和 原因 ,以 便 在 今后 的 编程 中 避免 同样 的 错误 ,积累 编程 经 验 ,提高 编程 能 力 。 


10. 项 目 进度 吃紧 时 可 以 少 做 些 测 试 ,等 到 时 间 富 裕 时 再 多 做 测试 


这 是 不 重视 软件 测试 的 表现 ,也 是 软件 项 目 过程 管 理 混乱 的 表现 ,必然 会 降低 软件 测 
试 的 质量 。 一 个 软件 项 目的 顺利 实现 需要 有 合理 的 项 目 进度 计划 ,其 中 包括 合理 的 测试 
计划 ,对 项 目 实施 过 程 中 的 任何 问题 ,都 要 有 风险 分 析 和 相应 的 对 策 , 不 要 因为 开发 进度 
的 延期 而 简单 地 缩短 测试 时 间 、 人 力 和 资源 。 因 为 缩短 测试 时 间 带 来 的 测试 不 完整 ,对 项 
目 质量 的 下 降 引 起 的 潜在 风险 ,往往 造成 更 大 的 浪费 。 克 服 这 种 现象 的 最 好 办 法 是 加 强 
软件 过 程 的 计划 和 控制 ,包括 软件 测试 计划 ,测试 设计 、 测 试 执行 测试 度量 和 测试 控制 。 


11. 通过 软件 测试 发 现 所 有 问题 


我 们 不 可 能 对 程序 的 所 有 输入 都 进行 测试 ,不 可 能 对 程序 的 所 有 输入 组 合 都 进行 测 
试 ,不 可 能 对 程序 的 所 有 路 径 都 进行 测试 ,因此 不 可 能 通过 软件 测试 发 现 所 有 问题 。 这 种 
想法 是 不 现实 的 ,也 是 不 可 能 完成 的 。 
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12. 通过 测试 证 明 软 件 的 正确 性 


软件 测试 是 为 了 检验 所 开发 的 软件 系统 是 否 达 到 用 户 的 需求 ,是 否 能 够 按照 规格 和 
标准 执行 。 通 过 测试 并 修改 后 的 软件 ,只 能 说 明 已 经 发 现 的 缺陷 得 到 了 改正 ,但 并 不 能 证 
明 程 序 中 就 没有 问题 了 。 


2.5 软件 质量 


软件 测试 是 按照 测试 方案 和 流程 对 产品 进行 测试 ,在 执行 测试 用 例 后 ,需要 跟踪 故 
障 , 以 确保 开发 的 软件 产品 满足 需求 。 软 件 测试 是 软件 质量 保证 的 关键 步骤 ,软件 质量 越 
高 ,软件 发 布 后 的 维护 费用 就 越 低 。 软 件 缺 陷 发 现 得 越 早 ,软件 开发 费用 就 越 低 。 软 件 工 
程 实践 表明 ,深刻 理解 软件 思想 的 工程 师 通过 一 系列 软件 测试 步骤 ,可 以 大 幅度 地 提高 软 
件 质量 。 

本 节 首 先 介绍 了 软件 质量 的 定义 、 软 件 质量 标准 和 软件 质量 标准 的 发 展 过 程 ,然后 详 
细 介 绍 软件 质量 保证 (SQA)、 软 件 能 力 成 熟 度 模型 (CCMM) 和 能 力 成 熟 度 整合 模型 
(CMMI). 


2.5.1 软件 质量 概述 


1. 软件 质量 的 定义 


对 软件 质量 的 定义 根据 侧重 点 的 不 同 ,下 面 是 比较 权威 的 几 种 定义 。 

1979 年 Fisher 和 Light 将 软件 质量 定义 为 : 表征 计算 机 系统 卓越 程度 的 所 有 属性 
的 集合 。1982 年 他 们 将 软件 质量 定义 修改 为 : 软件 产品 满足 明确 需求 一 组 属性 的 
集合 。 

АМЅІЛЕЕЕ std729(1983) 对 软件 质量 定义 是 : 软件 产品 中 能 够 满足 规定 的 和 隐 含 
的 与 定义 的 需求 有 关 的 全 部 特征 和 特性 。 具 体 地 说 ,软件 质量 是 软件 符合 明确 叙述 的 功 
能 和 性 能 需求 文档 中 明确 描述 的 开发 标准 以 及 所 有 专业 开发 的 软件 都 应 具有 的 隐 含 特 
征 的 程度 。 影 响 软件 质量 的 主要 因素 包括 正确 性 ,健壮 性 、 效 率 、 完 整 性 ,可 用 性 、 可 理解 
性 ,可 维修 性 、 灵 活性 、 可 测试 性 、 可 移植 性 、 可 再 用 性 、 互 运行 性 等 。 

1994 年 国际 标准 化 组 织 ISO8042 将 软件 质量 定义 为 : 反映 实体 满足 明确 的 和 隐 含 
的 需求 的 能 力 和 特性 的 总 和 。 

GB/T12504—1990 对 软件 质量 定义 是 : 软件 质量 是 指 软件 产品 中 能 满足 给 定 需 求 
的 各 种 特性 的 总 和 。 这 些 特性 称 为 质量 特性 ,包括 功能 度 、 可 靠 性 、 易 用 性 、 时 间 经 济 性 、 
可 维护 性 和 移植 性 等 。 

GB/T11457 一 2006 对 软件 质量 定义 是 : 

(1) 软件 产品 中 能 满足 给 定 需 求 的 性 质 和 特性 的 总 体 。 

(2) 软件 具有 所 期 望 的 各 种 属性 的 组 合 程度 。 


41 


《软件 测试 技术 教程 》 


(3) 顾客 和 用 户 觉得 软件 满足 其 综合 期 望 的 程度 。 

(4) 确定 软件 在 使 用 中 将 满足 顾客 期 望 要 求 的 程度 。 

反映 软件 质量 特性 的 主要 因素 如 下 : 

(1) 正确 性 (Correctness) 是 指 系统 满足 规格 说 明和 用 户 目标 的 程度 , 即 在 预订 环境 
下 正确 地 完成 预期 功能 的 程度 。 

(2) 可 用 性 (Availability) 是 指 系统 能 够 正常 运行 的 时 间 比 例 。 

(3) 可 靠 性 (Reliability) 是 指 系统 在 应 用 或 者 错误 面前 ,在 意外 或 者 错误 使 用 的 情况 


下 维持 软件 系统 功能 特性 的 能 力 。 

(4) 健壮 性 (Robustness) 是 指 在 处 理 或 者 环境 中 系统 能 够 承受 的 压力 或 者 变更 
能 力 。 

(5) 安全 性 (Security) 是 指 系统 向 合法 用 户 提供 服务 的 同时 能 够 阻止 非 授权 用 户 使 
用 的 企图 或 者 拒绝 服务 的 能 力 。 

(6) 可 修改 性 (Modification) 是 指 能 够 快速 地 以 较 高 的 性 能 价格 比 对 系统 进行 变更 
的 能 力 。 


(7) 可 变性 (Changeability) 是 指 体系 结构 扩充 或 者 变更 成 为 新 体系 结构 的 能 力 。 

(8) 易 用 性 (Usability) 是 衡量 用 户 使 用 软件 产品 完成 指定 任务 的 难 易 程度 。 

(9) 可 测试 性 CTestability) 是 指 软件 发 现 故障 并 隔离 定位 故障 的 能 力 特性 以 及 在 一 
定 的 时 间或 者 成 本 前 提 下 进行 测试 设计 ,测试 执行 能 力 。 

(10) 功能 性 (Function ability) 是 指 系统 所 能 完成 所 期 望 工作 的 能 力 。 

(11) 互 操作 性 (InterOperation) 是 指 系 统 与 外 界 或 系统 与 系统 之 间 的 相互 作用 
能 力 。 

(12) 效率 (Efficiency) 是 指 系 统 能 否 有 效 地 使 用 计算 机 资源 ,如 时 间 和 空间 等 。 

(13) 可 理解 性 (Understandability) 通 常 是 指 简单 性 和 清晰 性 ,对 于 同一 用 户 要 求 , 解 
决 的 方案 可 以 有 多 个 ,其 中 最 简单 .最 清晰 的 方案 往往 被 认为 是 最 好 的 方案 。 

总 之 ,一 个 软件 系统 的 质量 应 该 从 可 维护 性 .可靠 性 .可 理解 性 .效率 等 多 个 方面 全 面 
地 进行 评价 。 对 于 不 同 的 软件 系统 ,各 个 目标 的 重要 程度 是 不 同 的 ,每 个 目标 要 求 达到 什 
么 程度 又 受 经 费 . 时 间 等 因素 的 限制 ,所 以 在 开发 具体 软件 系统 的 过 程 中 ,开发 人 员 应 该 
充分 考虑 各 种 不 同 的 方案 ,在 各 种 矛盾 的 目标 之 间 进 行 权 衡 , 并 在 一 定 的 限制 条 件 下 使 可 
维护 性 可 靠 性 、 可 理解 性 和 效率 等 性 质 最 大 限度 地 得 到 满足 。 


2. 软件 质量 标准 


软件 质量 按照 制定 的 结构 和 适用 的 范围 不 同 分 为 国际 标准 、 国 家 标准 行业 标准 、 企 
业 标 准 和 项 目 规范 。 

1) 国际 标准 

国际 标准 是 由 国际 联合 机 构 制定 和 公布 的 、 供 各 国 参 考 的 标准 。 国 际 标准 化 组 织 
ISO (International Standards Organization) 有 着 广泛 的 代表 性 和 权威 性 , 它 所 公布 的 标 
准 也 有 较 大 的 影响 。 其 中 ,ISO 建立 了 “计算 机 与 信息 处 理 技术 委员 会 ”, 简 称 ISO/ 
TC97 ,专门 负责 与 计算 机 有 关 的 标准 化 工作 。 这 类 标准 通常 冠 有 ISO 字样 ,如 ISO 
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8631 一 86 Information processing_program constructs and conventions for their representation 
《信息 处 理 一 一 程序 构造 及 其 表示 法 的 约定 》。 又 如 1509001. 2008《 质 量 管理 体系 
要 求 》。 
2) 国家 标准 
国家 标准 是 由 政府 或 国家 级 的 机 构 制定 或 批准 的 、 适 用 于 全 国 范围 的 标准 ,如 中 华人 
民 共 和 国 国 家 技术 监督 局 公布 实施 的 标准 ,简称 “国标 "。 现 已 批准 了 若干 软件 工程 标准 。 
与 软件 工程 和 软件 测试 相关 的 国家 标准 有 : 
GB/T 9386 一 1988《 计 算 机 软件 测试 文件 编制 规范 》; 
GB/T 15532 一 1995《 计 算 机 软件 单元 测试 规范 》; 
GB/T 17544 一 1998《 信 息 技 术 软件 包 质量 要 求 和 测试 》; 
GB/T 16260. 1 一 2003《 软 件 工程 产品 质量 》; 
GBT 9386 一 2008《 计 算 机 软件 测试 文档 编制 规范 》; 
GB/T 16260. 1 一 2006《 软 件 工程 产品 质量 》; 
GB/T 15532 一 2008《 计 算 机 软件 测试 规范 》; 
GB/T 20917 一 2007《 软 件 工 程 软件 测量 过 程 》; 
GB/T 8567《 计 算 机 软件 文档 规范 》; 
GB/T 18336. 1 一 2008《 信 息 技术 安全 技术 信息 技术 安全 性 评估 准则 》; 
GB/T 20009 一 2005《 信 息 安全 技术 数据 库 管 理 系 统 安全 评估 准则 》; 
GB/T 20273 一 2006《 信 息 安 全 技术 数据 库 管理 系统 安全 技术 要 求 》; 
GB/T 21671 一 2008《 基 于 以 太 网 技术 的 局 域 网 系统 验收 测评 规范 》; 
GB/T 18336. 1 一 2008《 信 息 技 术 安全 技术 信息 技术 安全 性 评估 准则 》; 
GB/T 20279 一 2006《 信 息 安 全 技术 网 络 和 终端 设备 隔离 部 件 安全 技术 要 求 》; 
GB/T 20280 一 2006《 信 息 安 全 技术 网 络 脆弱 性 扫描 产品 测试 评价 方法 》; 
GB/T 20282 一 2006《 信 息 安全 技术 信息 系统 安全 工程 管理 要 求 》; 
GB/T 20945 一 2007《 信 息 安全 技术 信息 系统 安全 审计 产品 技术 要 求 和 测试 评价 
方法 》; 
GB/T 20984 一 2007《 信 息 安全 技术 信息 安全 风险 评估 规范 》; 
GB/T 22239 一 2008《 信 息 安全 技术 信息 系统 安全 等 级 保护 基本 要 求 》; 
。 GB/T 16260. 1 一 2006《 软 件 工程 产品 质量 》。 
其 他 一 些 有 影响 的 国家 标准 机 构 有 : 
。 ANSI(American National Standards Institute) 即 美国 国家 标准 协会 ,是 美国 一 些 
民间 标准 化 组 织 的 领导 机 构 ,在 美国 和 全 球 都 有 权威 性 。 
。 BS(British Standard) 英 国 国 家 标准 机 构 。 
JIS(Japanese Industrial Standard) 日 本 工业 标准 机 构 。 
“ DIN(Deutsches Institut fiir Normung) 德 国标 准 协会 。 
3) 行业 标准 
行业 标准 是 由 行业 机 构 .学术 团体 或 国防 机 构 制定 的 .适用 于 某 个 业务 领域 的 标准 。 
例如 ,IEEE(Institute of Electrical апа Electronics Engineers) 美 国电 气 与 电子 工程 师 学 
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会 。 有 一 个 软件 标准 分 技术 委员 会 (SESS) ,负责 软件 标准 化 活动 。IEEE 公布 的 标准 常 
冠 有 ANSI 的 字 头 。 例 如 , ANSI/IEEE Str 828 一 1983《 软 件 配置 管理 计划 标准 》。IEEE 
829 一 1998( 软 件 测试 文档 编制 标准 》。 

GJB 中 华人 民 共 和 国 国家 军用 标准 。 这 是 由 中 国 国 防 科学 技术 工业 委员 会 批准 , 适 
合 于 国防 部 门 和 军队 使 用 的 标准 。 例 如 ,GJB 437 一 88《 军 用 软件 开发 规范 》。 

4) 企业 标准 

一 些 大 型 企业 或 公司 ,由 于 软件 工程 工作 的 需要 ,制定 适用 于 本 部 门 的 规范 。 例 如 ， 
美国 IBM 公司 通用 产品 部 1984 年 制定 的 《程序 设计 开发 指南 ), 仅 供 该 公司 内 部 使 用 。 

5) 项 目 规范 

项 目 规范 由 某 一 企业 或 科研 生产 项 目 组 织 制定 ,为 该 项 任务 专用 的 软件 工程 规范 ， 
例如 : 

。 打印 机 测试 规范 

。 扫描 仪 测试 规范 ; 

。 显示 器 测试 规范 ; 

。 硬盘 测试 规范 ; 

。 投影 机 测试 规范 ; 

。 台式 个 人 计算 机 测试 规范 ; 

。 笔记 本 测试 规范 ; 

。 显示 卡 测试 规范 ; 

。 服务 器 测试 规范 ; 
交换 机 测试 规范 ; 
防火 墙 测 试 规范 。 


3. 软件 质量 标准 的 发 展 过 程 


软件 质量 标准 是 20 世纪 70 年 代 首先 在 美国 国防 部 的 军用 标准 发 展 而 来 的 ,其 后 很 
多 跨国 公司 也 制定 自己 的 公司 标准 ,一 些 国家 制定 自己 国家 的 国标 。 

1986 年 11 月 为 了 满足 美国 联邦 政府 评估 软件 供应 商 能 力 的 要 求 ,美国 卡 内 基 ， 梅 
隆 大 学 软件 工程 研究 院 (SED 展 开 研 究 ,以 探索 一 种 保证 软件 产品 质量 .缩短 开发 周期 和 
提高 工作 效率 的 软件 工程 模式 与 标准 规范 。1991 年 ,CMM 1. 0 版 正式 推出 ,以 后 又 出 现 
Т СММІ. 


2.5.2 软件 质量 保证 


目前 ,质量 管理 越 来 越 受 关注 ,质量 意识 也 不 断 在 创新 。 单 纯 的 质量 检验 已 经 发 展 到 
了 全 面 质量 管理 .能力 成 熟 度 模型 、 零 缺陷 管理 等 新 的 理论 .方法 和 体系 。 新 的 质量 管理 
理念 使 得 质量 改进 过 程 得 到 了 极 大 的 改善 ,完善 的 质量 保证 体系 .严格 的 质量 认证 是 软件 
企业 提高 生产 力 和 竞争 力 的 重要 因素 。 相 应 地 ,高 度 的 质量 意识 正 慢 慢 扎根 于 软件 研发 
和 管理 人 员 的 灵魂 深 处 ,直至 整个 组 织 质量 文化 的 形成 , 带 来 的 一 些 有 益 探索 和 实践 包括 
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敏捷 建 模 、 极 限 编程 .软件 驱动 开发 .团队 软件 过 程 等 。 通 过 有 效 的 软件 质量 管理 模式 和 
系统 的 软件 质量 工程 体系 ,质量 文化 作为 软件 组 织 的 全 体 员工 共同 质量 价值 观 体现 ,发 挥 
出 越 来 越 重 要 的 作用 ,并 贯穿 到 软件 的 整个 生命 周期 。 


1. 软件 质量 保证 的 定义 


软件 质量 保证 (Software Quality Assurance,SQA) 是 建立 一 套 有 计划 ,有 系统 的 方 
法 ,来 向 管理 层 保证 拟定 出 的 标准 .步骤 .实践 和 方法 能 够 正确 地 被 所 有 项 目 所 采用 。 软 
件 质量 保证 的 目的 是 使 软件 过 程 对 于 管理 人 员 来 说 是 可 见 的 。 它 通过 对 软件 产品 和 活动 
进行 评审 和 审计 来 验证 软件 是 合乎 标准 的 。 软 件 质量 保证 组 在 项 目 开始 时 就 一 起 参与 建 
立 计划 、 标 准 和 过 程 。 这 些 将 使 软件 项 目 满足 机 构 方 针 的 要 求 。 

IEEE 中 对 软件 质量 保证 的 定义 是 : 质量 保证 是 有 计划 和 系统 性 的 活动 , 它 对 部 件 和 
产品 满足 确定 的 技术 需求 提供 足够 的 信心 。 

伴随 软件 安全 性 问题 ,软件 测试 是 利用 测试 工具 按照 测试 方案 和 流程 对 产品 进行 功 
能 和 性 能 测试 。 或 者 根据 需要 编写 不 同 的 测试 工具 来 设计 和 维护 测试 系统 ,并 对 测试 方 
案 可 能 出 现 的 问题 进行 分 析 和 评估 。 同 时 ,在 执行 测试 用 例 后 ,需要 跟踪 故障 ,以 确保 开 
发 的 软件 产品 满足 需求 。 软 件 测试 是 软件 质量 保证 的 关键 步骤 ,软件 质量 越 高 ,软件 发 布 
后 的 维护 费用 就 越 低 。 软 件 缺 陷 发 现 得 越 早 ,软件 开发 费用 就 越 低 。 软 件 工程 实践 表明 ， 
深刻 理解 软件 思想 的 工程 师 通 过 一 系列 软件 测试 步骤 ,可 以 大 幅度 地 提高 软件 质量 。 


2. SQA 的 目标 


实施 软件 质量 保证 的 目标 是 以 独立 审查 方式 ,从 第 三 方 的 角度 监控 软件 开发 任务 的 
执行 ,就 软件 项 目 是 否 正 遵循 已 制定 的 计划 、 标 准 和 规程 ,给 开发 人 员 和 治理 层 提供 反映 
产品 和 过 程 质量 的 信息 和 数据 ,提高 项 目 透 明度 ,同时 辅助 软件 工程 组 取得 高 质量 的 软件 
产品 。 主 要 包括 以 下 四 个 方面 : 

(1) 通过 监控 软件 开发 过 程 来 保证 产品 质量 。 

(2) 保证 开发 出 来 的 软件 和 软件 开发 过 程 符合 相应 标准 与 规程 。 

(3) 保证 软件 产品 、 软 件 过 程 中 存在 的 不 符合 问题 得 到 处 理 , 必 要 时 将 问题 反映 给 高 
级 治理 者 。 

Са) 确保 项 目 组 制定 的 计划 、 标 准 和 规程 适合 项 目 组 需要 ,同时 满足 评审 和 审计 

除了 以 上 四 个 方面 之 外 ,我 们 还 希望 SQA 能 作为 软件 工程 过 程 小 组 (SEPG) 在 项 目 
组 中 的 延伸 ,能 够 收集 项 目 中 好 的 实施 方法 和 发 现实 施 不 利 的 原因 ,为 修改 企业 内 部 软件 
开发 整体 规范 提供 依据 ,为 其 他 项 目 组 的 开发 过 程 实施 提供 先进 方法 和 样 例 。 


3. 对 SQA 人 员 的 素质 要 求 


O) SQA 人 员 要 有 很 强 的 沟通 能 力 。 从 实施 SQA 的 目的 中 可 以 看 出 ,SQA 不 在 项 
目 中 ,是 独立 于 软件 项 目的 第 三 方 .但 他 要 了 解 项 目的 开发 过 程 和 进度 ,捕捉 到 项 目 中 不 
符合 要 求 的 问题 ,这 就 要 求 SQA 人 员 能 够 深入 项 目 , 和 软件 开发 经 理 以 及 项 目 组 中 的 开 
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发 人 员 保 持 很 好 的 沟通 ,这 样 才 能 及 时 获得 真实 的 项 目 情况 。 

(2) SQA 人 员 要 熟悉 软件 开发 过 程 。 作 为 SQA AR ,既然 要 确保 项 目 组 制定 的 计 
划 ,标准 和 规程 符合 项 目 组 要 求 ,那么 SQA 人 员 首 先 自己 就 要 了 解 软 件 项 目 开发 过 程 以 
及 企业 内 部 已 经 有 的 开发 过 程 规范 。 

(3) SQA 人 员 本 身 要 有 很 强 的 计划 性 。SQA 人 员 一 方面 要 监督 软件 项 目 组 编写 计 
划 , 另 一 方面 SQA 人 员 自 身 的 工作 也 要 有 计划 ,并 且 能 够 按照 计划 开展 工作 。 

(4) SQA 人 员 要 能 应 对 繁杂 的 工作 。 作 为 SQA 人 员 在 跟踪 项 目 进行 过 程 的 时 候 要 
对 项 目 组 的 很 多 工作 产品 进行 审计 ,而 且 会 参与 项 目 组 中 的 多 种 活动 。 同 时 一 个 SQA 
人 员 还 有 可 能 会 面 对 多 个 项 目 组 ,所 以 任务 相对 繁杂 ,这 就 要 求 SQA 人 员 在 处 理 这 些 事 
物 的 时 候 要 耐心 细致 。 

(5) SQA 人 员 要 客观 和 有 责任 心 。 作 为 第 三 方 对 项 目 过 程 进行 监督 ,SQA 人 员 要 能 
保持 自己 的 客观 性 ,不 能 一 味 讨好 项 目 经 理 , 也 不 能 成 为 项 目 组 中 的 宪兵 ,否则 会 影响 工 
作 的 开展 。 对 于 项 目 组 中 多 次 协调 解决 不 了 的 问题 ,要 向 项 目的 高 层 经 理 汇 报 ,以 完成 
SQA 的 使 命 。 

以 上 五 点 是 作为 SQA 人 员 应 该 具备 的 基本 素质 ,此 外 ,一 个 好 的 SQA 人 员 还 应 该 
在 软件 开发 过 程 中 作为 开发 人 员 或 测试 人 员 参 与 过 一 个 或 多 个 环节 ,这 样 他 们 才能 在 过 
程 监督 中 比较 准确 地 抓 住 重 点 ,同时 他 们 的 意见 和 提出 的 解决 办 法 也 会 更 贴近 项 目 组 ,也 
容易 被 项 目 组 接受 。 


4. SQA 工作 的 主要 内 容 


1) 与 SQA 计划 直接 相关 的 工作 

SQA 在 项 目 早期 要 根据 项 目 计 划 制 定 与 其 对 应 的 SQA 计划 ,定义 出 各 阶段 的 检查 
重点 ,标识 出 检查 ,审计 的 工作 产品 对 象 ,以 及 在 每 个 阶段 SQA 的 输出 产品 。 定 义 越 具 
体 , 对 于 SQA 今后 的 工作 的 指导 性 就 会 越 强 ,同时 也 便于 软件 项 目 经 理 和 SQA 组 长 对 
其 工作 的 监督 。 编 写 完 SQA 计划 后 要 组 织 SQA 计划 的 评审 ,并 形成 评审 报告 ,把 通过 
评审 的 SQA 计划 发 送 给 软件 项 目 经 理 、 项 目 开发 人 员 和 所 有 相关 人 员 。 

2) 参与 项 目的 阶段 性 评审 和 审计 

在 SQA 计划 中 通常 已 经 根据 项 目 计 划 定 义 了 与 项 目 阶 段 相 应 的 阶段 检查 ,包括 参 
加 项 目 在 本 阶段 的 评审 和 对 其 阶段 产品 的 审计 。 对 于 阶段 产品 的 审计 通常 是 检查 其 阶段 

品 是 否 按 计划 按 规程 输出 并 内 容 完 整 ,这 里 的 规程 包括 企业 内 部 统一 的 规程 也 包括 项 

目 组 内 自己 定义 的 规程 。 但 是 SQA 一 般 不 负责 检查 阶段 产品 内 容 的 正确 性 ,对 于 内 容 
的 正确 性 通常 交 由 项 目 中 的 评审 来 完成 。SQA 参与 评审 是 从 保证 评审 过 程 有 效 性 方面 
人 入手, 如 参与 评审 的 人 是 否 具备 一 定 资格 .是 否 规定 的 人 员 都 参见 了 评审 .评审 中 对 被 评 
审 的 对 象 的 每 个 部 分 都 进行 了 评审 、 并 给 出 了 明确 的 结论 等 。 

3) 对 项 目 日 常 活动 与 规程 的 符合 性 进行 检查 

这 是 SQA 的 日 常 工 作 内 容 。 由 于 SQA 独立 于 项 目 组 ,假如 只 是 参与 阶段 性 的 检查 
和 审计 很 难 及 时 反映 项 目 组 的 工作 过 程 ,所 以 SQA 也 要 在 两 个 阶段 点 之 间 设 置 若干 小 
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的 跟踪 点 ,来 监督 项 目的 进行 情况 ,以便 能 及 时 反映 出 项 目 组 中 存在 的 问题 ,并 对 其 进行 
追踪 。 假 如 只 在 阶段 点 进行 检查 和 审计 ,即便 发 现 了 问题 也 难免 过 于 滞后 ,不 符合 尽早 发 
现 问题 .把 问题 控制 在 最 小 的 范围 之 内 的 整体 目标 。 

4) 对 配置 治理 工作 的 检查 和 审计 

SQA 要 对 项 目 过 程 中 的 配置 治理 工作 是 否 按照 项 目 最 初 制定 的 配置 治理 计划 进行 
监督 ,包括 配置 治理 人 员 是 否定 期 进行 该 方面 的 工作 .是 否 所 有 人 得 到 的 都 是 开发 过 程 产 
品 的 有 效 版 本 。 这 里 的 过 程 产 品 包 括 项 目 过 程 中 产生 的 代码 和 文档 。 

5) 跟踪 问题 的 解决 情况 

对 于 评审 中 发 现 的 问题 和 项 目 日 常 工作 中 发 现 的 问题 ,SQA 要 进行 跟踪 ,直至 解决 。 
对 于 在 项 目 组 内 可 以 解决 的 问题 就 在 项 目 组 内 部 解决 ,对 于 在 项 目 组 内 部 无 法 解决 的 问 
题 , 可 以 报告 给 高 层 经 理 。 

6) 收集 新 方法 ,提供 过 程 改 进 的 依据 

由 于 SQA 人 员 有 机 会 直接 接触 很 多 项 目 组 ,对 于 项 目 组 在 开发 治理 过 程 中 的 优点 
和 缺点 都 能 准确 获得 第 一 手 资料 。 他 们 有 机 会 了 解 项 目 组 中 治理 好 的 地 方 是 如 何 做 的 ， 
采用 了 什么 有 效 的 方法 ,并 将 好 的 做 法 和 方法 在 SQA 小 组 的 活动 中 与 其 他 SQA 人 员 共 
享 。 这 样 这 些 好 的 实施 实例 就 可 以 被 传播 到 更 多 的 项 目 组 中 。 对 于 企业 内 过 程 规范 定义 
的 不 准确 或 是 不 方便 的 地 方 ,软件 项 目 组 也 可 以 通过 SQA 小 组 反映 到 软件 工程 过 程 小 
组 ,便于 下 一 步 对 规程 进行 修改 和 完善 。 


5. 软件 质量 保证 与 软件 测试 的 关系 


软件 测试 是 软件 质量 保证 的 重要 手段 。 有 些 研究 数据 显示 ,国外 软件 开发 机 构 一 半 
以 上 的 工作 量 花 在 软件 测试 上 ,对 于 一 些 要 求 高 可 靠 、 高 安全 的 软件 ,测试 费用 可 能 相当 
于 整个 软件 项 目 开 发 所 有 费用 的 3 至 5 倍 。 由 此 可 见 ,要 成 功 开发 出 高 质量 的 软件 产品 ， 
必须 重视 并 加 强 软件 测试 工作 。 

软件 测试 和 软件 质量 保证 是 软件 质量 工程 的 两 个 不 同 层面 的 工作 。 软 件 测试 只 是 软 
件 质量 保证 工作 的 一 个 重要 环节 。 

测试 虽然 也 与 开发 过 程 紧 密 相关 ,但 它 所 关心 的 不 是 过 程 的 活动 ,相对 的 是 关心 结 
果 。 测 试 人 员 要 对 过 程 中 的 产物 (开发 文档 和 源 代码 ) 进 行 静态 审核 ,运行 软件 , 找 出 问 
题 , 报 告 质 量 甚至 评估 ,而 不 是 为 了 验证 软件 的 正确 性 。 当 然 ,测试 的 目的 是 为 了 去 证 明 
软件 有 错 ,否则 就 违背 了 测试 人 员 的 本 职 了 。 因 此 ,测试 虽然 对 提高 软件 质量 起 了 关键 的 
作用 ,但 它 只 是 软件 质量 保证 中 的 一 个 重要 环节 。 

从 公司 业务 出 发 ,SQA 的 工作 是 相对 靠 前 ,而 软件 测试 相对 靠 后 。 这 也 同样 验证 了 
两 者 的 本 质 区 别 , 即 软件 测试 和 软件 质量 保证 是 软件 质量 工程 的 两 个 不 同 层面 的 工作 。 
软件 测试 只 是 软件 质量 保证 工作 的 一 个 重要 环节 。 

软件 质量 保证 SQA 从 流程 方面 保证 软件 的 质量 ,而 软件 测试 从 技术 方面 保证 软件 
的 质量 。 
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2.5.3 软件 能 力 成 熟 度 模型 


随 着 时 代 的 发 展 , 人 们 开始 意识 到 ,软件 的 开发 不 仅仅 在 于 新 技术 是 否 出 现 , 更 在 于 
软件 使 用 过 程 的 管理 。 软 件 企业 的 开发 结构 只 有 在 形成 一 套 完 整 而 熟练 的 过 程 后 ,其 开 
发 才能 够 步 人 正轨 。 目 前 ,软件 能 力 成 熟 度 模 型 (CMM) 作 为 当前 世界 上 最 流行 、 最 实用 
的 软件 生产 过 程 的 评价 标准 ,已 被 国际 软件 产业 界 公认 为 软件 企业 进入 国际 市 场 的 通 
行 证 。 

1. СММ 的 产生 


СММ Æ Capability Maturity Model for Software 的 缩写 , 即 软件 能 力 成 熟 度 模型 。 
CMM 的 研究 始 于 1986 年 11 月 ,为 了 满足 美国 联邦 政府 评估 软件 供应 商 能 力 的 要 求 , 美 
国 卡 内 基 ， 梅 隆 大 学 软件 工程 研究 院 (SED) 展开 研究 ,以 探索 一 种 保证 软件 产品 质量 、 缩 
短 开 发 周期 和 提高 工作 效率 的 软件 工程 模式 与 标准 规范 。1991 4E, CMM1. 0 版 正式 推 
出 ,其 后 又 修改 升级 为 CMM1. 1,CMM2. 0 等 版 本 ,并 被 纳入 国际 标准 组 织 , 成 为 认证 标 
准 之 一 。 

CMM 除了 包括 有 效 开 发 软件 的 作业 程序 外 ,还 分 成 了 五 个 循序 渐进 的 质量 等 级 
(CMM1~CMM5), 分 别 为 初始 级 、 可 重复 级 、 已 定义 级 ,已 管理 级 和 优化 级 。 其 中 ， 
СММ5 是 CMM 认证 的 最 高 标准 ,可 有 效 地 帮助 企业 改进 和 优化 管理 ,大 大 提高 软件 企 
业 的 开发 水 平和 产品 质量 。 根 据 SEI 的 统计 ,软件 企业 在 引入 CMM 管理 后 ,劳动 生产 率 
平均 增长 35% ,错误 比率 平均 减少 39% ,平均 成 本 回报 率 为 5: 1。 

获得 СММ 认证 对 许多 软件 外 包 企业 有 着 不 可 抵挡 的 诱惑 。 所 谓 “* 外 包 ”, 就 是 指 企 
业 把 整个 工作 或 工作 的 一 部 分 交 由 其 他 公司 去 做 。 之 所 以 这 样 做 ,一 个 重要 的 原因 就 是 
节约 成 本 。 因 为 外 包 的 对 象 一 般 选 择 劳 动力 价格 及 运营 成 本 相对 低廉 的 国家 , 比 在 本 国 
内 招募 员工 的 支出 要 少 得 多 。 目 前 ,软件 外 包 的 发 包 市 场 主 要 集中 在 北美 .西欧 和 日 本 等 
国家 ,外 包 接 包 市 场 主要 是 印度 和 爱尔兰 。2003 年 ,印度 软件 与 服务 出 口 额 高 达 125 亿 
美元 , 居 全 球 之 冠 。 

为 增强 自身 实力 ,积极 参与 国际 竞争 .国内 软件 企业 把 资质 认证 也 提 上 了 日 程 。 我 国 
政府 明确 表示 鼓励 软件 出 口 型 企业 通过 СММ 认证 。 各 地 方 政 府 也 制定 了 相应 的 政策 ， 
如 上 海 市 就 规定 对 在 本 市 注册 并 通过 CMM3 一 5 认证 的 企业 可 以 分 别 获 得 40 万 、60 万 
和 80 万 元 人 民 币 资助 。 

获得 了 СММ 认证 就 获得 了 迈 向 国际 市 场 的 通行 证 。IDG 统计 数据 显示 ,目前 全 球 
软件 外 包 市 场 规模 已 达到 1000 亿美 元 。 中 国 拥有 软件 企业 近 9000 家 ,虽然 2003 ERE 
软件 出 口 总 额 仅 为 20 亿美 元 ,但 随 着 我 们 企业 自身 实力 的 壮大 ,中 国外 包 市 场 必 将 拥有 
美好 的 明天 。 

CMM 包含 四 个 目标 : 

(1) 通过 对 实践 和 技术 的 定义 .评估 和 成 熟 预测 ,以 加 快 导 入 和 推广 高 成 效 的 软件 工 
程 的 实践 和 技术 。 
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(2) 在 软件 工程 和 技术 转型 方面 维护 一 个 长 期 有 效 的 资格 认证 工作 。 
(3) 使 工业 和 政府 组 织 通 过 自己 的 直接 努力 实现 软件 工程 的 有 规划 的 改进 。 
(4) 促进 软件 工程 持续 不 断 的 应 用 所 采纳 的 优秀 标准 。 


2. CMM 的 五 个 级 别 


CMM 定义 了 软件 过 程 成 熟 度 的 五 个 级 别 , 如 图 2-11 所 示 。 

级 别 1: 初始 级 。 描 述 了 不 成 熟 ,或 者 说 是 未 
定义 过 程 的 组 织 。 

级 别 2: 可 重复 级 。 需 要 解决 需求 管理 ,软件 可 管理 级 
项 目 计划 、 软 件 项 目 跟踪 和 监控 、 软 件 子 合同 管理 、 
软件 质量 保证 、 软 件 配 置 管理 等 过 程 区 域 。 已 定义 级 

级 别 3: 已 定义 级 。 需 要 解决 组 织 级 过 程 焦 жемі 
点 ` 组 织 级 过 程 定义 .培训 大 纲 、 集 成 软件 管理 、 软 ” 
件 产 品 工程 .组 间 协 调 、 同 行 评审 等 过 程 区 域 。 初始 级 

级 别 4: 已 管理 级 。 需 要 解决 定量 过 程 管理 、 
软件 质量 管理 等 过 程 区 域 。 

级 别 5: 优化 级 。 需 要 解决 缺陷 预防 .技术 更 新 管理 .过 程 更 改 管理 等 过 程 区 域 。 

多 数组 织 的 基本 目标 是 达到 成 熟 度 3 级 。 评 估 组 织 当前 的 成 熟 度 级 别 的 手段 之 一 是 
软件 能 力 评估 (SCE)。SCE 通过 评估 软件 过 程 和 项 目 实践 来 确定 该 组 织 是 否 言 行 一 致 。 
组 织 的 过 程 体现 了 如 实 记 录 所 做 的 工作 ,项 目 实施 是 对 该 过 程 的 特定 剪裁 和 解释 ,应 该 证 
明说 到 做 到 。 


3. 国内 软件 企业 参与 实施 СММ 


近来 ,CMM 获得 了 各 界 越 来 越 多 的 关注 ,摩托 罗拉 中 国 过 了 5 级 ,不 少 企业 如 华为 、 
联想 , 东 大 阿尔 派 , 天 大 天 财 、 创 智 .亚信 等 一 批 企业 都 在 进行 研究 或 者 实施 预 评估 。 国 家 
发 布 的 关于 促进 IT 业 发 展 的 18 号 文件 ,以 及 软件 企业 资格 认证 等 有 关 文件 中 ,都 鼓励 企 
业 实 施 CMM 认证 ,国内 很 多 省 市 对 于 通过 СММ 认证 给 予 奖 励 政 策 。 预 计 未 来 几 年 内 ， 
国内 将 出 现 软件 业 实 施 CMM 的 高 潮 。 但 是 ,中 国 相关 企业 实施 CMM 的 过 程 中 ,存在 着 
一 些 问题 。 

体系 实施 中 会 遇 到 的 诸多 问题 ,包括 领导 重视 程度 不 够 ,开发 人 员 、 项 目 经 理 抵触 情 
绪 , 质 保 人 员 和 软件 工程 人 员 得 不 到 应 有 的 尊重 和 权威 等 ,归根 结 底 是 文化 冲突 。 
1509000 和 CMM 体系 都 是 基于 法 治 的 体系 ,而 国人 普遍 习惯 于 人 治 的 氛围 ,大 到 整个 国 
家 小 到 一 个 企业 莫不 如 此 ,这 种 冲突 正 是 很 多 问题 的 根源 。 

以 CMM 的 组 织 结构 为 例 , 它 推荐 在 最 高 领导 之 下 设立 SEPG( 软 件 工程 过 程 组 )、 
SQA( 质 量 保 证 组 )\SEG( 软 件 工程 组 ) ,这 三 个 组 构成 是 立法 .监督 和 执法 的 制衡 体系 ， 
体现 的 是 西方 文化 的 法 治 观念 。 而 我 们 在 整体 企业 管理 上 推行 制度 化 都 困难 重重 ,何况 
是 质量 管理 。 冲 突 体 现在 ,其 一 是 社会 的 文化 环境 与 少数 企业 制度 化 要 求 的 冲突 ,其 二 是 
企业 基础 管理 的 不 完全 制度 化 和 质量 管理 的 制度 化 特质 的 冲突 。 


优化 级 


图 2-11 CMM 的 五 个 级 别 
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另外 ,CMM 的 实施 不 是 在 短 时 间 内 可 以 看 到 显著 成 效 的 , 它 强 调 逐 步 改进 。 每 升 一 
个 级 别 可 能 需要 1 一 2 年 。 这 样 的 情况 下 ,如果 企 业 管 理 者 没有 一 个 坚定 的 支持 态度 ,很 
难保 证 实施 不 被 半途 而 废 。 而 这 样 的 失败 又 成 了 新 的 打击 人 们 信心 的 案例 ,造成 恶性 
循环 。 

企业 对 于 为 此 会 付出 多 少 辛苦 时间 精力 、 资 源 都 应 该 有 充分 的 心理 准备 。 把 推行 质 
量 管理 当 作 企业 推行 全 面 制度 化 的 一 个 手段 和 阶梯 。 从 企业 的 层面 来 看 ,通过 实施 质量 
体系 ,事实 上 改造 了 原 有 企业 文化 ,使 制度 化 的 观念 深入 人 心 ,为 企业 引入 西方 先进 的 管 
理 思想 .推行 全 面 的 制度 化 管理 奠定 了 思想 和 文化 基础 。 


2.5.4 能 力 成 熟 度 整 合 模型 


随 着 CMM1.0 的 推出 ,从 CMM 衍生 出 了 一 些 改善 模型 ,如 5У/-СММ,5Е-СММ, 
IPD-CMM 等 。 不 过 ,在 同一 个 组 织 中 多 个 过 程 改 进 模型 的 存在 可 能 会 引起 冲突 和 混淆 。 
CMMI 就 是 为 了 解决 怎么 保持 这 些 模式 之 间 的 协调 。 


1. CMMI 的 产生 


2000 年 12 月 由 卡 内 基 。 梅 隆 大 学 软件 工程 研究 所 SEO 率先 发 布 了 能 力 成 熟 度 整 
合 模型 (Capability Maturity Model Integration,CMMIJ) 项 目 致力 于 帮助 企业 缓解 这 种 困 
境 。CMMI 为 改进 一 个 组 织 的 各 种 过 程 提供 了 一 个 单一 的 集成 化 框架 ,新 的 集成 模型 杠 
架 消 除了 各 个 模型 的 不 一 致 性 ,减少 了 模型 间 的 重复 ,增加 透明 度 和 理解 ,建立 了 一 个 自 
动 的 ,可 扩展 的 框架 。 因 而 能 够 从 总 体 上 改进 组 织 的 质量 和 效率 。CMMI 主要 关注 点 就 
是 成 本 效益 、 明 确 重点 、 过 程 集 中 和 灵活 性 四 个 方面 。 

与 原 有 的 能 力 成 熟 度 模型 类 似 ,CMMI 也 包括 了 在 不 同 领域 建立 有 效 过 程 的 必要 元 
素 , 反 映 了 业界 普遍 认可 的 最 佳 实践 ;专业 领域 覆盖 软件 工程 、 系 统 工程 ,集成 产品 开发 和 
系统 采购 。 在 此 前 提 下 ,CMMI 为 企业 的 过 程 构建 和 改进 提供 了 指导 和 框架 作用 ;同时 
为 企业 评审 自己 的 过 程 提供 了 可 参照 的 行业 基准 。 

CMMI 的 主要 原则 如 下 : 

(1) 强调 高 层 管理 者 的 支持 。 过 程 改进 往往 也 是 由 高 层 管理 者 认识 和 提出 的 ,大 力 
度 的 、 一 致 的 支持 是 过 程 改 进 的 关键 。 

(2) 仔细 确定 改进 目标 ,首先 应 该 对 给 定时 间 内 的 所 能 完成 的 改进 目标 进行 正确 的 
估计 和 定义 并 制订 计划 ,选择 能 够 达到 的 目标 和 能 够 看 到 对 组 织 的 效益 。 

(3) 选择 最 佳 实践 ,应 该 基于 组 织 现 有 的 软件 活动 和 过 程 财富 ,参考 其 他 标准 模型 ， 
取 其 精华 去 其 糟粕 ,得 到 新 的 实践 活动 模型 。 

(4) 过 程 改进 要 与 组 织 的 商务 目标 一 致 ,与 发 展 战略 紧密 结合 。 


2. CMMI 基本 内 容 


CMMI 内 容 分 为 要 求 . 期 望 和 提供 信息 三 个 级 别 , 来 衡量 模型 包括 的 质量 重要 性 和 
作用 。 要 求 级 别 , 是 模型 和 过 程 改 进 的 基础 。 期 望 级 别 , 其 在 过 程 改进 中 起 到 主要 作用 ， 
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但 是 某 些 情况 不 是 必须 的 可 能 不 会 出 现在 成 功 的 组 织 模型 中 。 提 供 的 信息 级 别 , 构 成 了 
模型 的 主要 部 分 ,为 过 程 改 进 提 供 了 有 用 的 指导 ,在 许多 情况 下 他 们 对 需要 和 期 望 的 构件 
做 了 进一步 说 明 。 

CMMI 提供 了 阶段 式 表述 (Staged Representation ) 和 连续 式 表述 (Continuous 
Representation) 两 种 表示 方法 。 阶 段 式 表 述 表 示 为 一 系列 成 熟 度 等 级 阶段 ,强调 的 是 组 
织 的 成 熟 度 , 从 过 程 域 的 角度 考察 整个 组 织 的 过 程 成 熟 度 阶 段 。 连 续 式 表述 强调 的 是 单 
个 过 程 域 的 能 力 , 从 过 程 域 的 角度 考察 基线 和 度量 结果 的 改善 。 

两 种 表示 法 的 差异 反应 了 为 每 个 能 力 和 成 熟 度 等 级 描述 过 程 而 使 用 的 方法 ,它们 虽 
然 描 述 的 机 制 可 能 不 同 ,但 是 两 种 表示 方法 通过 采用 公用 的 目标 和 方法 作为 需要 的 和 期 
望 的 模型 元 素 ,而 达到 了 相同 的 改善 目的 。 


3. CMM 与 CMMI 的 区 别 


(1) 就 软件 工程 而 言 ,CMMI 是 СММ 的 最 新 版 本 。 

(2) CMMI 的 过 程 域 不 再 局 限于 纯粹 的 软件 范畴 , 比 СММ 多 了 几 个 过 程 域 。 

(3) CMMI 模型 最 终 代替 CMM 模型 的 趋势 不 可 避免 。 

此 外 ,CMM 的 基于 活动 的 度量 方法 和 瀑布 过 程 的 有 次 序 的 、 基 于 活动 的 管理 规范 有 
非常 密切 的 联系 ,更 适合 瀑布 型 的 开发 过 程 。 虽然 СММ 保留 了 基于 活动 的 方法 , 它 的 确 
集成 了 软件 产业 内 很 多 现代 的 最 好 的 实践 ,因此 它 很 大 程度 上 淡化 了 和 瀑布 思想 的 联系 。 
CMM 和 瀑布 思想 相 联 系 , 而 CMMI 和 和 迭代 思想 联系 得 更 紧密 。 

在 CMMI 模 型 中 在 保留 了 CMM 阶段 式 表 述 的 基础 上 ,出 现 了 连续 式 表述 ,这 样 可 
以 帮助 一 个 组 织 以 及 这 个 组 织 的 客户 更 加 客观 和 全 面 的 了 解 它 的 过 程 成 熟 度 。 两 种 表现 
方式 从 他 们 所 涵盖 的 过 程 区 域 上 来 说 并 没有 不 同 , 不 同 的 是 过 程 区 域 的 组 织 方式 以 及 对 
成 熟 度 级 别 的 判断 方式 。 

CMMI 模型 中 比 CMM 进一步 强化 了 对 需求 的 重视 。 在 СММ 中 ,关于 需求 只 有 需 
求 管理 这 一 个 关键 过 程 域 ,也 就 是 说 ,强调 对 有 质量 的 需求 进行 管理 ,而 如 何 获取 需求 则 
没有 提出 明确 的 要 求 。CMM 中 还 强调 了 风险 管理 。 不 像 在 CMM 中 把 风险 的 管理 分 散 
在 项 目 计 划 和 项 目 跟踪 与 监控 中 进行 要 求 。 


2.6 ”软件 可 靠 性 


软件 可 靠 性 (Software Reliability) 是 软件 产品 在 规定 的 条 件 下 和 规定 的 时 间 区 间 完 
成 规定 功能 的 能 力 。 规 定 的 条 件 是 指 直接 与 软件 运行 相关 的 使 用 该 软件 的 计算 机 系统 的 
状态 和 软件 的 输入 条 件 ,或 统称 为 软件 运行 时 的 外 部 输入 条 件 ; 规 定 的 时 间 区 间 是 指 软 件 
的 实际 运行 时 间 区 间 ;规定 功能 是 指 为 提供 给 定 的 服务 ,软件 产品 所 必须 具备 的 功能 。 软 
件 可 靠 性 不 但 与 软件 存在 的 缺陷 和 (或 ) 差错 有 关 , 而 且 与 系统 输入 和 系统 使 用 有 关 。 和 软 
件 可 靠 性 的 概率 度量 称 软件 可 靠 度 。 


51 | 一 


《软件 测试 技术 教程 》 


1. 软件 可 靠 性 的 概念 


1975 年 Goodenough 和 Gerhart 在 名 为 “Toward а theory of test data selection” HJ X 
章 里 首先 提出 了 软件 可 靠 性 的 观点 。 他 们 认为 过 去 的 测试 方法 之 所 有 系统 性 较 差 ,其 原 
因 是 缺乏 测试 理论 的 指导 。 因 此 ,他 们 提出 了 测试 可 靠 性 的 概念 和 理论 。 

1983 年 美国 IEEE 计算 机 学 会 对 “软件 可 靠 性 ”作出 了 定义 ,定义 包括 两 方面 的 
含义 ， 

(1) 在 规定 的 条 件 下 ,在 规定 的 时 间 内 ,软件 不 引起 系统 失效 的 概率 ; 

(2) 在 规定 的 时 间 周 期 内 ,在 所 述 条 件 下 程序 执行 所 要 求 的 功能 的 能 力 。 

其 中 的 概率 是 系统 输入 和 系统 使 用 的 函数 ,也 是 软件 中 存在 的 故障 的 函数 ,系统 输入 
将 确定 是 否 会 遇 到 已 存在 的 故障 (如 果 故 障 存在 的 话 ) 。 


2. 影响 软件 可 靠 性 的 因素 


软件 可 靠 性 是 关于 软件 能 够 满足 需求 功能 的 性 质 ,软件 不 能 满足 需求 是 因为 软件 中 
的 差错 引起 了 软件 故障 。 

1) 软件 差错 

软件 差错 是 软件 开发 各 阶段 潜入 的 人 为 错误 。 主 要 表现 在 : 

(1) 需求 分 析 定 义 错误 。 如 用 户 提 出 的 需求 不 完整 ,用 户 需 求 的 变更 未 及 时 消化 , 软 
件 开发 者 和 用 户 对 需求 的 理解 不 同等 。 

(2) 设计 错误 。 如 处 理 的 结构 和 算法 错误 ,缺乏 对 特殊 情况 和 错误 处 理 的 考虑 等 。 

(3) 编码 错误 。 如 语法 错误 .变量 初始 化 错误 等 。 

(4) 测试 错误 。 如 数据 准备 错误 .测试 用 例 错误 等 。 

(5) 文档 错误 。 如 文档 不 齐全 ,文档 相关 内 容 不 一 致 ,文档 版 本 不 一 致 ,缺乏 完整 
性 等 。 

从 上 游 到 下 游 ,错误 的 影响 是 发 散 的 ,所 以 要 尽量 把 错误 消除 在 开发 前 期 阶段 。 错 误 
引入 软件 的 方式 可 归纳 为 两 种 特性 : 程序 代码 特性 和 开发 过 程 特 性 。 

(1) 程序 代码 一 个 最 直观 的 特性 是 长 度 ,另外 还 有 算法 和 语句 结构 等 ,程序 代码 越 
长 ,结构 越 复 杂 , 其 可 靠 性 越 难 保证 。 

(2) 开发 过 程 特性 包括 采用 的 工程 技术 和 使 用 的 工具 ,也 包括 开发 者 个 人 的 业务 经 
历 水 平等 。 

2) 健壮 性 

影响 软件 可 靠 性 的 另 一 个 重要 因素 是 健壮 性 , 即 对 非法 输入 的 容错 能 力 。 所 以 提高 
可 靠 性 从 原理 上 看 就 是 要 减少 错误 和 提高 健壮 性 。 


3. 可 靠 性 保证 


软件 系统 规模 越 做 越 大 越 复杂 ,其 可 靠 性 越 来 越 难 保证 。 应 用 本 身 对 系统 运行 的 可 
靠 性 要 求 越 来 越 高 ,在 一 些 关键 的 应 用 领域 ,如 航空 .航天 等 ,其 可 靠 性 要 求 尤 为 重要 ,在 
银行 等 服务 性 行业 ,其 软件 系统 的 可 靠 性 也 直接 关系 到 自身 的 声誉 和 生存 发 展 竞争 能 力 。 
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特别 是 软件 可 靠 性 比 硬件 可 靠 性 更 难保 证 ,会 严重 影响 整个 系统 的 可 靠 性 。 在 许多 
项 目 开发 过 程 中 ,对 可 靠 性 没有 提出 明确 的 要 求 ,部 门 也 不 在 可 靠 性 方面 花 更 多 的 精力 ， 
往往 只 注重 速度 、 结 果 的 正确 性 和 用 户 界 面 的 友好 性 等 ,而 忽略 了 可 靠 性 。 在 投入 使 用 后 
才 发 现 大 量 可 靠 性 问题 ,增加 了 维护 困难 和 工作 量 ,严重 时 只 有 束之高阁 ,无 法 投入 实际 
使 用 。 


4. 软 硬 件 可 靠 性 区 别 


硬件 失效 曲线 如 图 2-12 所 示 。 从 图 2-12 中 可 以 看 出 ,硬件 投入 不 久 常 常 出 现 较 高 
的 失效 率 , 即 “天 折 期 ”; 当 进入 正常 状态 运行 后 ,其 失效 率 保持 一 个 很 小 的 常数 ; 随 着 时 间 
的 延长 ,硬件 磨损 、 灰 尘 、 震 动 和 误 操 作 等 ,会 使 曲线 陡然 上 升 ,直到 老化 和 报废 。 我 们 通 
常 把 这 种 两 端 几 ,中间 平 的 曲线 称 为 “浴盆 曲线 ”。 
失 
效 


==: 


ГТ” 用 坏 报废 期 时 间 


偶发 事故 期 
图 2-12 硬件 失效 曲线 


天 折 期 


软件 失效 曲线 如 图 2-13 所 示 ,实际 曲线 与 虚线 的 接触 点 为 修改 点 。 从 图 2-13 中 可 
以 看 出 ,软件 失效 曲线 与 硬件 失效 曲线 有 很 大 的 不 同 , 特 别 是 没有 右 端的 孝 起 ,这 是 由 于 
软件 运行 不 存在 老化 和 用 坏 的 情况 。 但 是 ,软件 运行 需要 经 过 多 次 的 维护 工作 ,每 次 修改 
缺陷 往往 又 带 来 新 的 缺陷 ,使 得 曲线 陡然 上 升 , 当 曲线 平稳 后 又 会 出 现 第 2 次 修改 ,使 得 
曲线 再 次 上 升 ,这 种 现象 会 反复 出 现 。 使 得 软件 失效 曲线 成 为 锯齿 状 曲线 。 


实际 曲线 --- 


图 2-13 软件 失效 曲线 


软件 可 靠 性 与 硬件 可 靠 性 之 间 主 要 存在 以 下 区 别 : 

(1) 最 明显 的 是 硬件 有 老化 损耗 现象 ,硬件 失效 是 物理 故障 ,是 器 件 物理 变化 的 必然 
结果 ,有 "浴盆 曲线 ?现象 ;软件 不 发 生变 化 ,没有 磨损 现象 ,有 陈旧 落后 的 问题 ,没有 浴盆 
曲线 现象 ,呈现 “锯齿 状 曲线 ”。 
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(2) 硬件 可 靠 性 的 决定 因素 是 时 间 , 受 设计 、` 生 产 、 运 用 的 所 有 过 程 影响 ,软件 可 靠 性 
的 决定 因素 是 与 输入 数据 有 关 的 软件 差错 ,是 输入 数据 和 程序 内 部 状态 的 函数 ,更 多 地 决 
ETA: 

(3) 硬件 的 纠 错 维护 可 通过 修复 或 更 换 失效 的 系统 重新 恢复 功能 ,软件 只 有 通过 重 
新 设计 或 修改 设计 才能 实现 。 

Са) 对 硬件 可 采用 预防 性 维护 技术 预防 故障 ,采用 断 开 失 效 部 件 的 办 法 诊断 故障 ,而 
软件 则 不 能 采用 这 些 技术 。 

(5) 事先 估计 可 靠 性 测试 和 可 靠 性 的 逐步 增长 等 技术 对 软件 和 硬件 有 不 同 的 意义 。 

(6) 为 提高 硬件 可 靠 性 可 采用 宛 余 技术 ,而 同一 软件 的 宛 余 不 能 提高 可 靠 性 。 

Ст) 硬件 可 靠 性 检验 方法 已 建立 ,并 已 标准 化 且 有 一 整套 完整 的 理论 ,而 软件 可 靠 性 
验证 方法 仍 未 建立 ,更 没有 完整 的 理论 体系 。 

(8) 硬件 可 靠 性 已 有 成 熟 的 产品 市 场 ,而 软件 产品 市 场 还 很 新 。 

(9) 软件 错误 是 永恒 的 ,可 重 现 的 ,而 一 些 瞬间 的 硬件 错误 可 能 会 被 误 认为 是 软件 
错误 。 

总 的 说 来 ,软件 可 靠 性 比 硬件 可 靠 性 更 难保 证 ,即使 是 美国 宇航 局 的 软件 系统 ,其 可 
靠 性 仍 比 硬件 可 靠 性 低 一 个 数量 级 。 


5. 与 软件 可 靠 性 相关 的 术语 


(1) 异常 : 偏离 期 望 的 状态 (或 期 望 值 ) 的 任何 情形 都 可 称 为 异常 。 

(2) 差错 : 差错 包含 几 个 方面 的 含义 。 

O 计算 的 ,观测 的 或 测量 的 值 与 真实 的 ,规定 的 或 理论 上 正确 的 值 或 条 件 之 间 的 
差别 。 

© 一 个 不 正确 的 步骤 、 过 程 或 数据 定义 。 

© 一 个 不 正确 的 结果 。 

Ф 一 次 产生 不 正确 的 结果 的 人 的 活动 。 

(3) 失效 : 一 个 程序 运行 的 外 部 结果 与 软件 产品 的 要 求 出 现 不 一 致 时 称 为 失效 。 软 
件 失效 证 明了 软件 中 存在 着 故障 。 

(4) 故障 : 在 一 个 计算 机 程序 中 出 现 的 不 正确 的 步骤 、 过 程 或 数据 定义 常 称 为 故障 。 
故障 包含 失效 。 

O 缺陷 : 不 符合 使 用 要 求 或 与 技术 规格 说 明 不 一 致 的 任何 状态 常 称 为 缺陷 。 缺 陷 
包含 故障 。 


6. 软件 可 靠 性 测试 评估 


软件 可 靠 性 评价 是 软件 可 靠 性 工作 的 重要 组 成 部 分 。 软 件 可 靠 性 评测 是 主要 的 软件 
可 靠 性 评价 技术 , 它 包 括 测试 与 评价 两 个 方面 的 内 容 , 既 适用 于 软件 开发 过 程 , 也 可 针对 
最 终 软件 产品 。 

在 软件 开发 过 程 中 使 用 软件 可 靠 性 评测 技术 ,除了 可 以 更 快速 地 找 出 对 可 靠 性 影响 
最 大 的 错误 ,还 可 以 结合 软件 可 靠 性 增长 模型 ,估计 软件 当前 的 可 靠 性 ,以 确认 是 否 可 以 
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终止 测试 和 发 布 软件 ,同时 还 可 以 预计 软件 要 达到 相应 的 可 靠 性 水 平 所 需要 的 时 间 和 测 
试 量 , 论 证 在 给 定 日 期 提交 软件 可 能 给 可 靠 性 带 来 的 影响 。 

对 于 最 终 软件 产品 ,软件 可 靠 性 评测 是 一 种 可 行 的 评价 技术 ,可 以 对 最 终 产 品 进行 可 
靠 性 验证 测试 ,确认 软件 的 执行 与 需求 的 一 致 性 ,确定 最 终 软件 产品 所 达到 的 可 靠 性 
水 平 。 

软件 可 靠 性 评测 的 主要 目的 是 测量 和 验证 软件 的 可 靠 性 ,当然 实施 软件 可 靠 性 评测 
也 是 对 软件 测试 过 程 的 一 种 完善 ,有 助 于 软件 产品 本 身 的 可 靠 性 增长 。 软 件 测试 者 可 以 
使 用 很 多 方法 进行 软件 测试 ,如 按 行为 或 结构 来 划分 输入 域 的 划分 测试 ,纯粹 随机 选择 输 
入 的 随机 测试 ,基于 功能 .路 径 .数据 流 或 控制 流 的 覆盖 测试 等 。 对 于 给 定 的 软件 ,每 种 测 
试 方法 都 局 限于 暴露 一 定数 量 和 一 些 类 别 的 错误 。 通 过 这 些 测试 能 够 查找 .定位 改正 和 
消除 某 些 错误 ,实现 一 定 意义 上 的 软件 可 靠 性 提高 。 

总 之 ,软件 可 靠 性 问题 是 软件 测试 的 一 个 难点 问题 之 一 ,由 于 程序 语言 的 复杂 性 和 被 
测 程序 的 多 样 性 ,需要 好 的 可 靠 性 模型 来 评价 它 。 软 件 可 靠 性 模型 是 建立 在 概率 论 和 数 
理 统计 基础 上 的 ,具有 代表 性 的 模型 有 JM 模型 .马尔 科 夫 模型 .GO 模型 和 LV 模型 等 。 
软件 可 靠 性 模型 的 建立 实际 是 为 了 找到 软件 失效 的 规律 ,目前 的 模型 有 上 百 种 ,但 都 通用 
性 不 高 .只 能 适用 于 某 些 环境 。 我 们 期 待 的 是 一 种 通用 性 强 、 精 度 高 的 模型 的 出 现 。 


习题 


1. IEEE 给 软件 测试 下 的 定义 是 什么 ? 

2. 软件 测试 的 基本 原则 有 哪些 ? 

З. 简 述 软件 测试 的 V 模型 、W 模型 H 模型 、X 模型 和 前 置 模型 。 

4. 简单 叙述 软件 测试 过 程 及 每 个 阶段 的 具体 做 什么 。 

5. 简 述 什么 是 静态 测试 和 动态 测试 ,什么 是 黑 盒 测试 . 白 盒 测试 和 灰 盒 测试 。 
6. 软件 测试 的 存在 哪些 误区 ? 

7. 什么 是 软件 质量 ? 5ОА.СММ,СММІ 分 别 代 表 什 么 ? 

8. 简 述 什么 是 软件 可 靠 性 。 
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ЗЕ 黑 盒 测 试 


黑 盒 测 试 是 软件 测试 的 核心 测试 方法 之 一 ,是 学 习 本 书 的 重点 内 容 。 在 黑 盒 测试 期 
间 ,把 被 测 程序 视 为 一 个 黑 盒子 ,测试 人 员 并 不 清楚 被 测 程序 的 源 代 码 或 者 该 程序 的 具体 
结构 ,不 需要 对 软件 的 结构 有 深层 的 了 解 , 而 是 只 知道 该 程序 输入 和 输出 之 间 的 关系 , 依 
靠 能 够 反映 这 一 关系 的 功能 规格 说 明 书 ,来 确定 测试 用 例 和 推断 测试 结果 的 正确 性 。 

本 章 介绍 黑 盒 测试 的 基本 概念 与 基本 方法 ,常用 的 黑 盒 测 试 方法 有 等 价 类 划分 .边界 
值 分 析 、 决 策 表 法 、 因 果 图 、 正 交 实 验 法 ,故障 猜测 法 ,状态 图 法 、 随 机 数据 法 等 。 每 种 黑 盒 
测试 方法 各 有 所 长 ,应 针对 软件 开发 项 目的 具体 特点 ,选择 适当 的 测试 方法 ,设计 高 效 的 
测试 用 例 , 有 效 地 将 软件 中 隐藏 的 故障 揭露 出 来 。 一 个 好 的 测试 策略 和 测试 方法 必 将 给 
整个 测试 工作 带 来 事半功倍 的 效果 。 本 章 的 实践 性 较 强 ,希望 能 举一反三 ,将 这 些 测试 技 
术 和 软件 开发 结合 起 来 学 习 。 


31 黑 盒 测试 概述 


黑 盒 测试 (Black Вох Testing) 也 称 功能 测试 , 它 是 通过 测试 来 检测 每 个 功能 是 否 都 
能 正常 使 用 。 在 黑 盒 测试 中 ,在 完全 不 考虑 程序 内 部 结构 和 内 部 特性 的 情况 下 ,在 程序 接 
口 进行 测试 , 它 只 检查 程序 功能 是 否 按照 需求 规格 说 明 书 аж 
的 规定 正常 使 用 ,程序 是 否 能 适当 地 接收 输入 数据 而 产生 输入 输出 
正确 的 输出 信息 。 黑 盒 测试 着 眼 于 程序 外 部 结构 ,不 考虑 一 一 
内 部 逻辑 结构 , 主要 针对 软件 界面 和 软件 功能 进行 测试 ， 
黑 盒 测试 示意 图 如 图 3-1 所 示 。 黑 盒 测试 是 一 种 基于 用 户 
观点 出 发 的 测试 。 

软件 黑 盒 测试 是 以 用 户 的 角度 ,从 输入 数据 与 输出 数据 的 对 应 关系 出 发 进行 测试 的 。 
很 明显 ,如 果 外 部 特性 本 身 有 问题 或 规格 说 明 的 规定 有 误 , 用 黑 盒 测试 方法 是 发 现 不 
了 的 。 

软件 黑 盒 测试 法 注重 于 测试 软件 的 功能 需求 ,主要 试图 发 现下 列 几 类 错误 : 功能 错 
误 或 遗漏 .界面 错误 .数据 结构 或 外 部 数据 库 访问 错误 ,性 能 错误 .初始 化 和 终止 错误 等 。 

黑 盒 测试 从 理论 上 讲 只 有 采用 穷 举 输入 测试 ,把 所 有 可 能 的 输入 都 作为 测试 情况 考 
虑 ,才能 查 出 程序 中 所 有 的 错误 。 实际 上 测试 情况 有 无 穷 多 个 ,人 们 不 仅 要 测试 所 有 合法 
的 输入 ,而 且 还 要 对 那些 不 合法 但 可 能 的 输入 进行 测试 。 这 样 看 来 ,完全 测试 是 不 可 能 
的 ,所 以 要 进行 有 针对 性 的 测试 ,通过 制定 测试 案例 指导 测试 的 实施 ,保证 软件 测试 有 组 
织 ,. 按 步骤 ,以 及 有 计划 地 进行 。 软 件 黑 盒 测试 行为 必须 能 够 加 以 量化 ,才能 真正 保证 软 
件 质 量 , 而 测试 用 例 就 是 将 测试 行为 具体 量化 的 方法 之 一 。 

例如 ,对 Windows 中 文件 名 的 测试 。Windows 文件 名 可 以 包括 除了 、、/、:、.、?、 


图 3-1 黑 盒 测 试 示意 图 


二 二 和 \ 之 外 的 任意 字符 。 文 件 名 长 度 是 1 一 255 个 字符 。 如 果 为 文件 名 创建 测试 用 例 ， 
等 价 类 分 合法 字符 ,非法 字符 ,合法 长 度 的 名 称 、 超 过 长 度 的 名 称 等 。 使 用 穷 举 设计 输入 
测试 测试 用 例 ,其 工作 量 是 人 们 无 法 承受 的 。Windows 附件 中 “写字 板 ” 软 件 的 “另存 为 ” 
对 话 框 如 图 3-2 所 示 。 


;| 是 我 的 电脑 
ЖЕНЕ со 
«хина о) 
(SFHR E) 

时 IVD-RM ЗЕ G:) 
«нше нә 

后 共享 文档 

Салљ 的 文档 


文件 名 0: ею O Гязв) | 
保存 类 型 or) (ЕТЕ) (та 


图 3-2 “另存 为 "对 话 框 


黑 盒 测试 用 例 设计 方法 包括 等 价 类 划分 法 、 边 界 值 分 析 法 、 错 误 推测 法 、 因 果 图 法 、 判 
定 表 、 正 交 实 验 设计 法 、 功 能 图 法 .场景 法 等 。 


3.2 等 价 类 划分 法 


等 价 类 划分 法 是 一 种 最 常用 的 黑 盒 测 试 方法 之 一 。 等 价 类 划分 法 (Equivalence 
Partitioning) 是 把 程序 的 输入 域 划 分 成 若干 部 分 ( 子 集 ) ,然后 从 每 个 部 分 中 选取 少数 代 
表 性 数据 作为 测试 用 例 。 每 一 类 的 代表 性 数据 在 测试 中 的 作用 等 价 于 这 一 类 中 的 其 
他 值 。 


3.2.1 划分 等 价 类 


等 价 类 是 指 某 个 输入 域 的 子 集合 。 在 该 子 集合 中 ,各 个 输入 数据 对 于 揭露 程序 中 的 
错误 都 是 等 效 的 ,并 合理 地 假定 : 测试 某 等 价 类 的 代表 值 就 等 于 对 这 一 类 其 他 值 的 测试 。 
因此 ,可 以 把 全 部 输入 数据 合理 划分 为 若干 等 价 类 ,在 每 一 个 等 价 类 中 取 一 个 数据 作为 测 
试 的 输入 条 件 , 就 可 以 用 少量 代表 性 的 测试 数据 ,取得 较 好 的 测试 结果 ,等 价 类 划分 可 有 
两 种 不 同 的 情况 : 有 效 等 价 类 和 无 效 等 价 类 。 

有 效 等 价 类 : 是 指 对 于 程序 的 规格 说 明 来 说 是 合理 的 ,有 意义 的 输入 数据 构成 的 集 
合 , 利 用 有 效 等 价 类 可 检验 程序 是 否 实现 了 规格 说 明 中 所 规定 的 功能 和 性 能 。 
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无 效 等 价 类 : 与 有 效 等 价 类 的 定义 恰巧 相反 。 

例如 ,输入 值 是 学 生成 绩 , 范 围 是 0 一 100, 其 有 效 等 价 类 和 无 效 等 价 类 划分 ,可 以 确 
定 一 个 有 效 等 价 类 和 两 个 无 效 等 价 类 。 小 于 60 分 和 大 于 100 分 为 有 效 等 价 类 ,大 于 等 于 
60 分 且 小 于 等 于 100 分 为 无 效 等 价 类 。 

设计 测试 用 例 时 ,要 同时 考虑 这 两 种 等 价 类 。 因 为 ,软件 不 仅 要 能 接收 合理 的 数据 ， 
也 要 能 经 受 意 外 的 考验 ,这 样 的 测试 才能 确保 软件 具有 更 高 的 可 靠 性 。 

下 面 给 出 六 条 确定 等 价 类 的 原则 。 

(1) 在 输入 条 件 规定 了 取 值 范围 或 值 的 个 数 的 情况 下 ,可 以 确立 一 个 有 效 等 价 类 和 
两 个 无 效 等 价 类 。 

(2) 在 输入 条 件 规定 了 输入 值 的 集合 或 者 规定 了 “必须 如 何 ” 的 条 件 的 情况 下 ,可 确 
立 一 个 有 效 等 价 类 和 一 个 无 效 等 价 类 。 

(3) 在 输入 条 件 是 一 个 布尔 量 的 情况 下 ,可 确定 一 个 有 效 等 价 类 和 一 个 无 效 等 价 类 。 

(4) 在 规定 了 输入 数据 的 一 组 值 (假定 个 ), 并 且 程 序 要 对 每 一 个 输入 值 分 别处 理 
的 情况 下 ,可 确立 nn 个 有 效 等 价 类 和 一 个 无 效 等 价 类 。 

(5) 在 规定 了 输入 数据 必须 遵守 的 规则 的 情况 下 ,可 确立 一 个 有 效 等 价 类 (符合 规 
则 ) 和 若干 个 无 效 等 价 类 (从 不 同 角度 违反 规则 ) 。 

(6) 在 确 知已 划分 的 等 价 类 中 各 元 素 在 程序 处 理 中 的 方式 不 同 的 情况 下 , 则 应 再 将 
该 等 价 类 进一步 划分 为 更 小 的 等 价 类 。 


3.2.2 设计 测试 用 例 


在 确立 了 等 价 类 后 ,可 建立 等 价 类 表 . 列 出 所 有 划分 出 的 等 价 类 ,如 表 3-1 所 示 。 
表 3-1 等 价 类 表 
输入 条 件 有 效 等 价 类 无 效 等 价 类 


然后 从 划分 出 的 等 价 类 中 按 以 下 三 个 原则 设计 测试 用 例 : 

(1) 为 每 一 个 等 价 类 规定 一 个 唯一 的 编号 。 

(2) 设计 一 个 新 的 测试 用 例 ,使 其 尽 可 能 多 地 覆盖 尚未 被 覆盖 的 有 效 等 价 类 ,重复 这 
一 步 , 直 到 所 有 的 有 效 等 价 类 都 被 覆盖 为 止 。 

(3) 设计 一 个 新 的 测试 用 例 , 使 其 仅 覆 盖 一 个 尚未 被 覆盖 的 无 效 等 价 类 ,重复 这 一 
步 ,直到 所 有 的 无 效 等 价 类 都 被 覆盖 为 止 。 


3.2.3 等 价 类 划分 法 举例 


1. 登录 窗口 
以 某 “学 生成 绩 信息 管理 系统 ”为 例 ,登录 窗口 的 界面 如 图 3-3 所 示 。 
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在 登录 窗口 中 不 考虑 身份 选择 情况 ,只 验证 


“用 户 名 ”“ 请 输入 密码 * 和 * 请 确认 窗 码 ”的 正确 

性 。 用 户 名 和 密码 的 输入 条 件 均 要 求 为 不 超过 |87850? ГЕР 

16 位 ,可 以 使 用 汉字 、 英 文字 母 和 数字 及 各 种 组 | 

合 , 密 码 和 确认 密码 相同 。 
首先 ,等 价 类 划分 法 对 用 户 名 和 密码 进行 等 图 3-3 登录 窗口 

价 类 划分 ,建立 等 价 类 表 , 如 表 3-2 所 示 。 在 某 网 

站 申请 免费 信箱 时 ,要 求 用 户 必须 输入 用 户 名 、 密 码 及 确认 密码 ,对 每 一 项 输入 条 件 的 要 


求 如 下 : 


D 用 户 名 要 求 为 4~16 位 ,可 使 用 英文 字母 .数字 、-、, 并 且 首 字符 必须 为 字母 或 


Ж; 


(2) 密码 要 求 为 6 一 16 位 ,只 能 使 用 英文 字母 .数字 或 -、, 并 且 区 分 大 小 写 。 
其 次 ,根据 等 价 类 表 生 成 测试 用 例 , 如 表 3-3 所 示 。 


表 3-2 等 价 类 表 
输入 条 件 有 效 等 价 类 编号 无 效 等 价 类 编号 
4 一 16 位 а аы А 
2 | 多 于 16 位 9 
用 户 名 首 字符 为 字母 3 | 首 字符 为 除 字母 ,数字 之 外 的 其 他 字符 10 
首 字符 为 数字 4 найы а А 
5 | 少 于 6 位 12 
英文 字母 ,数字 、-、 组 合 
请 输入 密码 6 | 多 于 16 位 13 
英文 字母 .数字 .-、 组 合 7 - 字母 .数字 、-、 之 外 的 其 
请 确认 密码 | 内 容 同 密码 相同 8 | 内 容 同 密码 同 , 但 确认 密码 字母 大 小 写 不 同 | 15 
表 3-3 测试 用 例 
测试 用 例 | 用 户 名 жон 确认 密码 预期 输出 覆盖 的 等 价 类 
ТСІ АВС 2000 | АВС 123 АВС 123 注册 成 功 1;2,4,5,6;7 
TC2 2000-ABC | 123-ABC 123-ABC 注册 成 功 1,3,4,5,6,7 
TC3 ABC 12345678 12345678 提示 用 户 名 错误 | 8 
TC4 ABC123456 | 12345678 12345678 提示 用 户 名 错误 | 9 
TC5 _ABC123 12345678 12345678 提示 用 户 名 错误 | 10 
TC6 ABC&123 | 12345678 12345678 提示 用 户 名 错误 | 11 
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测试 用 例 | 用 户 名 жон 确认 密码 


ТСТ. АВС 123 12345 12345 


预期 输出 
提示 密码 错误 12 
АВС123456 | АВСРЕЕСНІЈК123456 | 提示 密码 错误 13 
提示 密码 错误 14 
提示 密码 错误 15 


TC8 АВС 123 


ТС9 АВС. 123 ABC&123 | ABC&123 


TC10 | АВС 123 | ABC 123 | АВС 123 


2. DIMENSION 语句 


FORTRAN 编译 系统 的 设计 和 程序 编写 工作 已 经 完成 , 现 需 对 DIMENSION 语句 
的 实现 设计 测试 用 例 。 已 知 DIMENSION 语句 的 语法 规则 是 : DIMENSION 语句 用 以 
规定 数组 的 维 数 。 形 式 为 : 

DIMENSION AD[;AD]*** 
其 中 ,AD 是 数组 描述 符 , 其 形式 为 : 

n(d [dl …) 
其 中 ,n 是 数组 名 ,由 1 一 6 个 字母 或 数字 组 成 。 为 首 的 必须 是 字母 ;d 是 维 数 说 明 符 ,数组 
维 数 最 大 为 7, 最 小 为 1, 它 的 形式 为 [ lb: Jub。 

lb 和 ub 分 别 表示 数组 下 界 和 上 界 , 均 为 一 65 534 一 65 535 之 间 的 整数 ,也 可 是 整 型 
变量 名 (但 不 可 是 数组 元 素 名 )。 若 未 规定 lb, 则 认为 其 值 为 1, 且 ub 二 =lb。 若 已 规定 了 
lb, 则 它 可 为 负数 . 零 或 正 数 。DIMENSION 语句 也 和 其 他 语句 一 样 ,可 连续 写 多 行 。 

注释 : 以 上 规则 中 ,[ ] 内 为 任 选项 ,小 写字 母 代表 语法 单位 ,… 表 示 它 前 面 的 项 可 重 


复出 现 多 次 。 
首先 ,确定 输入 条 件 ,并 确定 等 价 类 ,如 表 3-4 所 示 ( 注 : 括号 中 数字 为 等 价 类 编号 ) 。 
表 3-4 等 价 类 表 
输入 条 件 有 效 等 价 类 无 效 等 价 类 
数组 描述 符 个 数 1(1),>1(2) 无 数组 描述 符 (3) 
数组 名 称 符 个 数 1 一 6(4) 0(5) ,二 6(6) 
数组 名 有 字母 (7) ,有 数字 (8) 有 其 他 字符 (9) 
数组 名 以 字母 开头 是 (10) FAL 
数组 维 数 1--7(12) 0(13).>>7(14) 
上 界 是 常数 (15) , 整 型 数量 (16) 数组 元 素 名 (17) ,其 他 (18) 
数组 变量 名 有 字母 (19) ,有 数字 (20) 其 他 (21) 
整 型 变量 名 以 字母 开头 是 (22) 否 (23) 
上 下 界 取 值 一 65 534--65 535(24) <<--65 534(25), >65 535(26) 
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输入 条件 有 效 等 价 类 无 效 等 价 类 
是 否定 义 下 界 是 (27) , 否 (28) 
上 界 对 下 界 关系 >(29),=(30) <31) 
下 界定 义 为 负数 (32) ,0(33) , 正 数 (34) 
下 界 是 常数 (35) , 整 型 变量 (36) 数组 元 素 名 (37) ,其 他 (38) 
语句 多 于 一 行 是 (39) , 否 (40) 


其 次 ,确定 覆盖 有 效 等 价 类 的 测试 用 例 。 每 一 个 测试 用 例 , 覆 盖 一 个 或 多 个 有 效 等 


价 类 。 


测试 用 例 编 号 (1): DIMENSION A(2)。 
覆盖 有 效 等 价 类 , 1,4,7,10,12,15,24,28,29,40. 


测试 用 例 编号 (2): DIMENSION А12345 (1.9. МҮҮҮ. 65 535. H, JKL, 100), 


BB( 一 65 534:100,0:1000,10:10,1:65 535). 
覆盖 其 余 有 效 等 价 类 : 2,8,16,19,20,22,27,30,32,34,35,36,39。 
第 三 ,确定 覆盖 无 效 等 价 类 的 测试 用 例 。 每 一 个 测试 用 例 , 覆 盖 一 个 无 效 等 价 类 ,如 


表 3-5 所 示 。 


表 3-5 覆盖 无 效 等 价 类 的 测试 用 例 


编号 输入 条 件 输入 数据 覆盖 等 价 类 
3 | 数组 描述 符 个 数 一 一 无 数组 描述 符 ”| DIMENSION 3 
4 | 数组 名 称 符 个 数 一 0 DIMENSION (10) 5 
5 | 数组 名 称 符 个 数 一 二 6 DIMENSION Al12345678(2) 6 
6 | 数组 名 一 一 有 其 他 字符 DIMENSION A. 1(2) 9 
т | 数组 名 以 字母 开头 一 一 否 DIMENSION 1A(10) 11 
8 | 数组 维 数 一 0 DIMENSION B 13 
9 | 数组 维 数 一 二 7 DIMENSION В(8.8.8.8,8.8.8,8.8) 14 
10 | 上 界 是 一 一 数组 元 素 名 DIMENSION B(4,A(2)) 17 
11 | 上 界 是 一 一 其 他 DIMENSION В(4..7) 18 
12 | 数组 变量 名 一 一 其 他 DIMENSION С(К * 5,10) 21 
1з | 整 型 变量 名 以 字母 开头 一 一 否 DIMENSION С(10.312 23 
14 上 下 界 取 值 一 一 二 一 65 534 DIMENSION D( 一 65535:1) 25 
15 | 上 下 界 取 值 一 一 之 65 535 DIMENSION D(65536) 26 
16 | 上 界 对 下 界 关 系 一 一 二 DIMENSION D(4:3) 31 
17 | 下 界 是 一 一 数组 元 素 名 DIMENSION D(A(2):4) 37 

DIMENSION D(:4) 38 


18 | 下 界 是 一 一 其 他 å 
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形 )。 另 外 ,假定 3 个 输入 a.b 和 c 在 1 一 100 之 间 取 值 (整数 )。 
下 面 对 题 目 进 行 更 详细 地 分 析 。 
输入 3 个 整数 a、b 和 c 分 别 作为 三 角形 的 三 条 边 ,要求 a.b 和 * 必须 满足 以 下 条 件 : 
(1) 整数 。 
(2) 3 个 数 。 


3. 三 角形 问题 


输入 三 个 整数 a、b 和 c 分 别 作为 三 角形 的 3 条 边 ,通过 程序 判断 由 这 3 条 边 构成 的 
三 角形 类 型 是 : 等 边 三 角形 、 等 腰 三 角形 、 一 般 三 角形 或 非 三 角形 (不 能 构成 一 个 三 角 


《3) 边 长 大 于 等 于 1 且 小 于 等 于 100。 

(4) 任意 两 边 之 和 大 于 第 三 边 。 

输出 为 五 种 情况 之 一 : 

(1) 如 果 不 满足 条 件 1、2、3, 则 程序 输出 为 “输入 错误 ”。 
(2) 如 果 不 满足 条 件 4, 则 程序 输出 为 “ 非 三 角形 ”。 

(3) 如 果 三 条 边 相等 , 则 程序 输出 为 “等 边 三 角形 ”。 

(4) 如 果 恰 好 有 两 条 边 相 等 , 则 程序 输出 为 “等 腰 三 角形 ”。 
(5) 如 果 三 条 边 都 不 相等 , 则 程序 输出 为 “一 般 三 角形 ”。 
输入 域 等 价 类 划分 和 输出 域 等 价 类 划分 如 表 3-6 所 示 。 


表 3-6 输入 域 等 价 类 划分 和 输出 域 等 价 类 划分 
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有 效 等 价 类 编 号 无 效 等 价 类 号 
а 为 整数 а 非 整数 13 
4 为 整数 2 53 14 
c 为 整数 3 < 非 整 数 15 
大 于 3 16 
= 4% 4 Ж 
小 于 3 17 
小 于 1 18 
1<а<<100 5 
大 于 100 19 
小 于 1 20 
15100 6 
大 于 100 21 
小 于 1 22 
1<с<100 7 
大 于 100 23 
а+ь<с 24 
两 边 之 和 大 于 第 三 边 8 а+с<Ь 25 
5--с<а 26 
非 三 角形 9 
等 边 三 角形 10 
等 腰 三 角形 1 
一 般 三 角形 12 


覆盖 有 效 等 价 类 的 测试 用 例如 表 3-7 所 示 , 覆盖 无 效 等 价 类 的 测试 用 例如 表 3-8 


所 示 。 


表 3-7 覆盖 有 效 等 价 类 的 测试 用 例 


测试 用 例 编号 输入 数据 输出 结果 覆盖 的 等 价 类 
ТСІ 30.30.30 等 边 三 角形 1,2,3,4,5,6,7,8,10 
TC2 30,30,20 等 腰 三 角形 Lr dd BG 
ТСЗ 30,40,50 一 般 三 角形 1:2;3:45:6;7;8,12 
TC4 30.40.90 非 三 角形 1,2,3,4,5,6,7,9 

表 3-8 覆盖 无 效 等 价 类 的 测试 用 例 

测试 用 例 编号 输入 数据 输出 结果 覆盖 的 等 价 类 
ТС5 11.1.10,10 输入 错误 13 
TC6 10,5.5,10 输入 错误 14 
ТС? 9.10.3.3 输入 错误 15 
TC8 10,10,10,4 输入 错误 16 
TC9 10.10 输入 错误 17 
ТС10 0,10,10 输入 错误 18 
TC11 101,50,50 输入 错误 19 
TC 10,-1,10 输入 错误 20 
T 50,110,50 输入 错误 21 
TC14 10,10,0 输入 错误 22 
ТСІ5 50,50,110 输入 错误 23 
TC16 10,10,50 输入 错误 24 
TC17 10,60,10 输入 错误 25 
TC18 110,10.30 输入 错误 26 


3.3 边界 值 分 析 法 


人 们 从 长 期 的 测试 实践 得 知 , 大 量 的 错误 是 发 生 在 输入 或 输出 范围 的 边界 上 ,而 不 是 
在 输入 范围 的 内 部 。 因 此 针对 各 种 边界 情况 设计 测试 用 例 , 可 以 查 出 更 多 的 错误 。 边 界 
值 分 析 法 是 用 于 对 输入 或 输出 的 边界 值 进行 测试 的 一 种 黑 盒 测 试 方法 。 在 测试 过 程 中 ， 
边界 值 分 析 法 是 作为 对 等 价 类 划分 法 的 补充 ,专注 于 每 个 等 价 类 的 边界 值 , 两 者 的 区 别 在 
于 前 者 在 等 价 类 中 随机 选取 一 个 测试 点 。 边 界 值 分 析 法 采用 一 到 多 个 测试 用 例 来 测试 一 
个 边界 ,不 仅 重视 输入 条 件 边界 值 ,而 且 重视 输出 域 。 边 界 值 分 析 法 比较 简单 , 仅 用 于 考 
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察 正 处 于 等 价 划 分 边界 或 边界 附近 的 状态 ,考虑 输出 域 边界 产生 的 测试 情况 ,针对 各 种 边 
界 情况 设计 测试 用 例 , 发 现 更 多 的 错误 。 边界 值 分 析 法 的 测试 用 例 是 由 等 价 类 的 边界 值 
产生 的 ,根据 输入 输出 等 价 类 ,选取 稍 高 于 边界 值 或 稍 低 于 边界 值 等 特定 情况 作为 测试 
用 例 。 


3.3.1 边界 值 分 析 法 的 含义 


在 等 价 类 划分 基础 上 进行 边界 值 分 析 测试 的 基本 思想 是 ,选取 正好 等 于 ,刚刚 大 于 或 
刚刚 小 于 等 价 类 边界 的 值 作为 测试 数据 ,而 不 是 选取 等 价 类 中 的 典型 值 或 任意 值 为 测试 
数据 。 

边界 值 分 析 法 (Boundary Value Analysis) 是 一 种 补充 等 价 类 划分 法 的 测试 用 例 设计 
技术 , 它 不 注重 选择 等 价 类 的 任意 元 素 , 而 是 注重 选择 等 价 类 边界 的 测试 用 例 。 在 测试 过 
程 中 ,可 能 会 忽略 边界 值 的 条 件 , 大 量 的 错误 是 发 生 在 输入 或 输出 范围 的 边界 上 ,而 不 是 
发 生 在 输入 输出 范围 的 内 部 。 因 此 针对 各 种 边界 情况 设计 测试 用 例 , 可 以 查 出 更 多 的 
错误 。 

边界 值 测试 主要 考虑 以 下 几 条 原则 : 

(1) 如 果 输 入 条 件 规定 了 值 的 范围 , 则 应 取 刚 达到 这 个 范围 边界 的 值 ,以 及 刚刚 超过 
这 个 范围 边界 的 值 作 为 测试 输入 数据 。 

例如 ,一 个 单位 对 身高 的 要 求 是 1. 70 一 1. 90m, 则 测试 用 例 为 1. 69、1. 70、1. 71、 
1. 89、1.90、1.91, 以 及 典型 值 1. 80。 

(2) 如 果 输 入 条 件 规 定 了 值 的 个 数 , 则 用 最 大 个 数 、 最 小 个 数 、 比 最 小 个 数 小 1 的 数 、 
比 最 大 个 数 大 1 的 数 作为 测试 数据 。 

例如 ,一 个 系统 规定 可 以 存储 文件 1 一 128 个 , 则 测试 用 例 为 0、1、128、129。 

(3) 如 果 程 序 的 规格 说 明 给 出 的 输入 域 或 输出 域 是 有 序 集 合 , 则 应 选取 集合 的 第 一 
个 元 素 和 最 后 一 个 元 素 作 为 测试 用 例 。 

例如 ,假设 C 语言 中 数组 长 度 为 n, 则 测试 用 例 是 数组 下 标 为 0 和 数组 下 标 为 "一 1。 

(4) 如 果 程 序 中 使 用 了 一 个 内 部 数据 结构 , 则 应 当选 择 这 个 内 部 数据 结构 的 边界 上 
的 值 作为 测试 用 例 。 

(5) 分 析 程 序 规格 说 明 , 找 出 其 他 可 能 的 边界 条 件 。 

边界 值 和 等 价 类 密切 相关 ,输入 等 价 类 和 输出 等 价 类 的 边界 是 要 着 重 测试 的 边界 情 
况 。 在 等 价 类 的 划分 过 程 中 产生 了 许多 等 价 类 边界 。 边 界 是 最 容易 出 错 的 地 方 ,所 以 ,从 
等 价 类 中 选取 测试 数据 时 应 该 关注 边界 值 。 

边界 值 分 析 法 的 必要 性 体现 在 ,软件 测试 常用 的 一 个 方法 是 把 测试 工作 按 同 样 的 形 
式 划 分 。 对 数据 进行 软件 测试 ,就 是 检查 用 户 输入 的 信息 、 返 回 结 果 以 及 中 间 计 算 结 果 是 
否 正 确 。 实 践 表 明 , 输 入 域 的 边界 值 比 中 间 的 值 更 加 容易 发 现 错误 。 实 践 证 明 , 大 量 的 错 
误 发 生 在 输入 或 输出 范围 的 边界 上 ,而 不 是 在 输入 范围 的 内 部 。 因 此 针对 各 种 边界 情况 
设计 测试 用 例 ,可 以 查 出 更 多 的 错误 。 


64 


3.3.2 边界 值 分 析 法 原理 


1. 边界 值 分 析 测 试 


这 里 讨论 有 两 个 变量 X Ж.Х, 的 程序 P。 假 设 输入 变量 X 和 X 在 下 列 范围 内 
取 值 : 
а<Х,<%с< Х,<а 
边界 值 分 析 利 用 输入 变量 的 最 小 值 (min)、 稍 大 于 最 小 值 (min 十 )、 域 内 任意 值 
(пот) 、 稍 小 于 最 大 值 (max 一 ) 和 最 大 值 (max) 来 设计 测试 用 例 。 即 通过 使 所 有 变量 取 正 
常 值 , 只 使 一 个 变量 分 别 取 最 小 值 ` 略 高 于 最 小 值 ` 略 低 于 最 大 值 和 最 大 值 ,如 图 3-4 
所 示 。 


K | | 

а------ Ш5----- .--- 二 
77—76 
Ф = а o 
| о | 

<------- Ы----- .----- ф-------- 
| | 
A ! 
а b X, 


图 3-4 边界 值 分 析 法 测试 用 例 
对 于 一 个 变量 的 程序 ,边界 值 分 析 测 试 会 产生 42 十 1 个 测试 用 例 。 
2. 健壮 性 边界 值 测试 


健壮 性 测试 是 边界 值 分 析 的 一 种 扩展 。 变 量 除了 取 min ,min 十 .nom .max 一 和 тах 
五 个 边界 值 外 ,还 要 考虑 采用 一 个 略 超过 最 大 值 Cmax 十 ) 以 及 一 个 略 小 于 最 小 值 Cmin 一 ) 
的 取 值 ,看 看 超过 极限 值 时 系统 会 出 现 什么 情况 ,如 图 3-5 所 示 。 
х, 


图 3-5 健壮 性 边界 值 分 析 法 测试 用 例 


健壮 性 测试 最 有 意义 的 部 分 不 是 输入 ,而 是 预期 的 输出 ,观察 例外 情况 如 何 处 理 。 
健壮 性 边界 值 测试 将 产生 6n 十 1 个 测试 用 例 。 
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3. 最 坏 情况 边界 值 分 析 法 

对 每 一 个 变量 首先 进行 包含 最 小 值 略 高 于 最 小 值 .正常 值 略 低 于 最 大 值 .最 大 值 五 
个 元 素 集合 的 测试 ,然后 对 这 些 集合 进行 笛 卡 儿 积 计 算 , 以 生成 测试 用 例 。 最 坏 情况 测试 
显然 更 彻底 ,但 测试 工作 量 较 大 。 

一 个 变量 个 数 为 n 的 最 坏 情况 测试 会 产生 5" 个 测试 用 例 , 如 图 3-6 所 示 。 


х, 
Й i 
1 


Е 5 с зни 


图 3-6 最 坏 情况 边界 值 分 析 法 测试 用 例 


4. 健壮 最 坏 情 况 测试 

对 每 一 个 变量 ,首先 进行 包含 最 小 值 . 略 高 于 最 小 值 ` 正 常 值 . 略 低 于 最 大 值 . 最 大 值 
五 个 元 素 集合 的 测试 ,还 要 采用 一 个 略 超过 最 大 值 的 取 值 ,以 及 一 个 略 小 于 最 小 值 的 取 
值 。 然 后 对 这 些 集合 进行 笛 卡 儿 积 计 算 , 以 生成 测试 用 例 。 

nn 变量 函数 的 健壮 最 坏 情况 测试 会 产生 7" 个 测试 用 例 , 如 图 3-7 所 示 。 


х 
7 е е be 


Ц Ц 
) е 
с-----<-%6ө---ө----...---- 
] й 1 
| а b X 


图 3-7 健壮 最 坏 情况 边界 值 分 析 法 测试 用 例 


3.3.3 边界 值 分 析 法 举例 


1. NextDate 函数 

NextDate ж ZAER H 07. H WAER RRG Eia Л. Н Л ІШ Ay aR 
个 日 期 。 变 量 月 份 . 日 期 和 年 都 为 整数 ,日 NextDate 函数 规定 了 Month, Day, Year 相应 
的 取 值 范围 , 即 1< = Month < = 12,1 < = Day < = 31,1912 < = Year < = 2050, 
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NextDate 函数 的 边界 值 分 析 法 测试 用 例如 表 3-9 所 示 。 
表 3-9 NextDate 函数 的 边界 值 分 析 法 测试 用 例 


测试 用 例 编号 Month Day Year 预期 输出 
ТСІ 6 15 1911 Year 超出 [1912,2050] 
тС? 6 15 1912 1912,6,16 
тсз 6 15 1913 1913.6,16 
TC4 6 15 1975 1975,6 ,16 
ТС5 6 15 1949 1949,6,16 
TC6 6 15 1950 1950,6,16 
ТС? 6 15 1951 Year 超出 [1912,2050] 
TC8 6 -1 2001 Day 超出 [1,31] 
ТС9 6 1 2001 2001.6.2 
ТС10 6 2 2001 2001,6,3 
TC11 6 30 2001 2001,7,1 
ТС12 6 31 2001 输入 日 期 超过 范围 
ТСІЗ 6 32 2001 Day 超出 [1,31] 
TC14 —1 15 2001 Month 超出 [1,12] 
TC15 i 15 2001 2001,1,16 
TC16 2 15 2001 2001,2,16 
ТС17 11 15 2001 2001,11,16 
TC18 12 15 2001 2001,12,16 
ТС19 13 15 2001 Month 超出 [1,12] 

2. 三 角形 问题 


Glenford Myers 的 经 典 著作 “The Art of Software Testing” 中 描述 了 三 角形 的 问题 。 
输入 三 个 整数 we 和 c 分 别 作为 三 角形 的 三 条 边 ,通过 程序 判断 由 这 三 条 边 构成 的 三 角 
形 类 型 是 : 等 边 三 角形 .等 腰 三 角形 .一般 三 角形 或 非 三 角形 (不 能 构成 一 个 三 角形 ) 。 

另外 ,假定 三 个 输入 ab 和 c 在 1 一 100 之 间 取 值 ( 整 数 ) ,覆盖 有 效 等 价 类 的 测试 用 
例如 表 3-10 所 示 。 

在 进行 等 价 类 分 析 时 ,往往 先 要 确定 边界 。 如 果 不 能 确定 边界 ,就 很 难 定义 等 价 类 所 
在 的 区 域 。 只 有 边界 值 确定 下 来 ,才能 划分 出 有 效 等 价 类 和 无 效 等 价 类 。 边 界 确定 清楚 
了 ,等 价 类 就 自然 产生 了 。 边 界 值 分 析 方 法 是 对 等 价 类 划分 法 的 补充 。 在 测试 中 ,会 将 两 
者 方法 结合 起 来 共同 使 用 。 


67 


《软件 测试 技术 教程 》 


表 3-10 ”覆盖 有 效 等 价 类 的 测试 用 例 


测试 用 例 编号 a b с 
ТСІ 50 50 1 
ТС? 50 50 2 
тез 50 50 50 
TC4 50 50 99 
TC5 50 50 100 
TC6 50 1 50 
TC7 50 2 50 
TC8 50 99 50 
TC9 50 100 50 
ТС10 1 50 50 
TC11 2 50 50 
TC12 99 50 50 
TC13 100 50 50 
3.4 决策 表 法 


决策 表 法 是 把 作为 条 件 的 所 有 输入 的 各 种 组 合 值 以 及 对 应 输出 值 都 罗列 出 来 而 形成 
的 表格 。 它 能 够 将 复杂 的 问题 按照 各 种 可 能 的 情况 全 部 列举 出 来 ,简明 并 避免 遗漏 。 因 
此 ,利用 决策 表 能 够 设计 出 完整 的 测试 用 例 集 合 。 在 所 有 的 黑 盒 测试 方法 中 ,基于 决策 表 
的 测试 是 最 严格 ,最 具有 逻辑 性 的 测试 方法 。 


3.4.1 决策 表 的 含义 


决策 表 (Decision Table) 又 称 判 定 表 , 是 一 种 呈 表 格 状 的 图 形 工 具 , 适 用 于 描述 处 理 
判断 条 件 较 多 ,各 条 件 又 相互 组 合 、 有 和 多 种 决策 方案 的 情况 。 精 确 而 简洁 描述 复杂 人 逻辑 的 
方式 ,将 多 个 条 件 与 这 些 条 件 满足 后 要 执行 动作 相对 应 。 但 不 同 于 传统 程序 语言 中 的 控 
制 语句 ,决策 表 能 将 多 个 独立 的 条 件 和 多 个 动作 直接 的 联系 清晰 地 表示 出 来 。 

决策 表 由 条 件 桩 .条 件 项 .动作 桩 和 动作 项 组 成 ,如 图 3-8 所 示 。 

条 件 桩 : 列 出 所 有 的 问题 , 即 条 件 。 

条 件 项 : 针对 条 件 桩 中 的 条 件 列 出 所 有 的 取 值 。 

动作 桩 : 列 出 针对 问题 可 能 采取 的 操作 。 条 件 柱 | 条 件 项 di 

= z z 动作 桩 ”| 动作 项 | 则 

动作 项 : 针对 条 件 项 中 的 各 组 取 值 列 出 所 要 采取 的 动作 。 

规则 : 条 件 项 和 动作 项 中 的 一 列 称 为 一 条 规则 。 图 3-8 决策 表 组 成 
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决策 表 法 测试 适用 于 具有 以 下 特征 的 应 用 程序 : 

(1) if-then-else 结构 。 

(2) 输入 变量 之 间 存 在 逻辑 关系 。 

(3) 涉及 输入 变量 子 集 的 计算 。 

(4) 输入 和 输出 之 间 存 在 因果 关系 。 

适用 于 使 用 决策 表 设 计 测试 用 例 的 情况 : 

(1) 规格 说 明 以 决策 表 形 式 给 出 ,或 者 较 容 易 转换 为 决策 表 。 
(2) 条 件 的 排列 顺序 不 会 也 不 应 该 影响 执行 的 操作 。 

有 nn 个 条 件 的 决策 表 , 对 应 的 规则 将 有 2" 条 。 


3.4.2 决策 表 法 举例 


创建 决策 表 有 五 个 步骤 ， 

(1) 列 出 所 有 的 条 件 桩 和 动作 桩 。 
(2) 确定 规则 的 个 数 。 

(3) 填 人 输入 项 。 

(4) 填 人 动作 项 ,得 到 初始 的 决策 表 。 
(5) 对 初始 的 决策 表 化 简 。 


1. 三 角形 问题 


输入 三 条 边 a.b、c, 判 断 是 否 是 三 角形 ;如 果 是 三 角形 ,继续 判断 是 等 腰 三 角形 还 是 
等 边 三 角形 。 试 画 出 决策 表 , 并 设计 测试 用 例 。 

第 一 步 , 列 出 所 有 的 条 件 桩 和 行动 桩 。 

三 角形 问题 的 条 件 桩 : 

(1) а<5--с? 

(2) b<ate? 

(3) с<а+6? 

(4) a=b? 

(5) а=с? 

(6) 5 一 c? 

三 角形 问题 的 动作 桩 : 

(1) 非 三 角形 。 

(2) 不 等 边 三 角形 。 

(3) 等 腰 三 角形 。 

(4) 等 边 三 角形 。 

(5) 不 可 能 。 

第 二 步 ,确定 规则 的 个 数 ,并 填 入 输入 项 和 动作 项 。 
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саки) 22) 


及 个 条 件 的 决策 表 , 对 应 的 规则 将 有 2” 条 ,本 题 的 规则 数 2 一 64。 

第 三 步 ,生成 决策 表 及 简化 的 决策 表 。 

当 非常 大 的 时 候 , 生 成 的 决策 表 非 常 大 。 因 此 ,应 对 决策 表 进 行 化 简 。 化 简 的 原则 
是 如 果 决 策 表 中 有 两 条 规则 相同 则 生成 简化 的 决策 表 , 如 表 3-11 所 示 。 


表 3-11 “三 角形 问题 "简化 的 决策 表 


рн, 内 容 1~32 | 33-48 | 48—56 |57 58 59 |60 |61 |62 |63 | 64 
a<b+c? F T T TTI TTT TIT 
b<ate? F T T| T| T| TIT TIT 
c<a+b? F T| TTET TITI т 

кі а=? T| ТТТ ЕЕ Е{ F 
а=? Т|Т{Е{Е{ ТТ Е| F 
8 一 <? Т(|Е|ТЦ(Е|ТЦЕ|Т| F 
非 三 角形 У У У 
不 等 边 三 角形 过 

动作 | 等 腰 三 角形 47 АЙ |24 
等 边 三 角形 v 
不 可 能 У |У У 

最 后 ,生成 测试 用 例 , 如 表 3-12 所 示 。 


表 3-12 “三 角形 问题 "的 测试 用 例 


编 号 а b c 预期 输出 
1 5 1 2 非 三 角形 
2 1 5 2 非 三 角形 
3 1 2 5 非 三 角形 
4 5 5 5 等 边 三 角形 
5 一 一 - 不 可 能 
6 - - - 不 可 能 
7 2 2 3 等 腰 三 角形 
8 一 一 一 不 可 能 
9 2 3 2 等 腰 三 角形 
10 3 2 2 等 腰 三 角形 
11 3 4 5 不 等 边 三 角形 
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2. 成 绩 录 入 窗口 


某 信息 科学 与 技术 学 院 成 绩 录入 窗口 如 图 3-9 所 示 , 其 需求 规格 说 明 包 括 三 个 下 拉 
列表 ,分 别 用 于 显示 各 学 院 名 称 ` 各 系 部 名 称 及 各 班级 Га аа 
名 称 。 只 有 选择 了 某 一 个 学 院 后 , 系 部 列表 框 才 为 可 Гаа) рата -ч 
用 ,列表 中 将 显示 出 所 选择 学 院 对 应 的 所 有 系 部 ; 同 |а ра 
样 ,只 有 选择 了 某 一 个 学 院 后 ,又 选择 了 某 一 个 系 部 ， 

此 时 班级 列表 框 才 为 可 用 ,列表 中 将 显示 出 所 选择 系 图 3-9 某 信息 科学 与 技术 
部 对 应 的 所 有 班级 。 当 三 个 选项 都 已 经 完成 选择 后 ， 学 院 成 绩 录 人 窗口 
界面 则 会 显示 出 所 选 班级 名 单 ,这 时 可 录入 成 绩 。 

操作 步骤 如 下 : 

第 一 步 , 列 出 所 有 的 条 件 桩 和 行动 桩 。 

由 规格 说 明 可 以 分 析出 ,输入 事件 即 条 件 桩 。 

C1: 选择 学 院 。 

C2: 选择 系 部 。 

Сз. 选择 班级 。 

输出 事件 及 行动 桩 。 

al: 显示 所 选 班级 名 单 。 

a2: 学 院 列表 框 可 用 。 

a3: 系 部 列表 框 可 用 。 

a4: 班级 列表 框 可 用 。 

a5: 显示 各 学 院 名 称 。 

a6: 显示 各 系 部 名 称 。 

a7: 显示 各 班级 名 称 。 

a8: 不 能 显示 具体 选项 (如 在 没有 选择 学 院 , 系 部 列表 框 中 将 不 能 显示 所 对 应 系 部 ) 。 

第 二 步 , 确 定 规则 的 个 数 , 并 填 和 输入 项 和 动作 项 。 

本 题 的 规则 数 23 一 8。 

第 三 步 , 生 成 决策 表 及 简化 的 决策 表 , 建 立 如 表 3-13 所 示 的 决策 表 。 


表 3-13 ЖЖЖ 

ж 项 1 2 3 4 5 6 7 8 
选择 学 院 Т T T T F F F F 
选择 系 部 T T F F T Т Е F 
选择 班级 T F T F T F T F 
显示 所 选 班级 名 单 v 
学 院 列表 框 可 用 v v v v У v v 
系 部 列表 框 可 用 v v v 
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续 表 
选 项 1 2 3 4 5 6 7 8 
班级 列表 框 可 用 У 
显示 各 学 院 名 单 У v v 
显示 各 系 部 名 单 
显示 各 班级 名 单 
不 能 形式 具体 选项 v v v У 
最 后 ,生成 的 成 绩 录入 窗口 测试 用 例如 表 3-14 所 示 。 
表 3-14 成 绩 录入 窗口 测试 用 例 
测试 用 例 操作 描述 输入 数据 预期 输出 
单 击 并 选择 学 院 学 院 : 信息 科学 与 技术 学 院 | 学 院 列 表 可 用 
ТСІ 单 击 并 选择 系 部 系 部 : 软件 工程 系 系 部 列表 可 用 
单 击 并 选择 班级 班级 : 信息 1201 班级 列表 可 用 
单 击 并 选择 学 院 学 院 : 信息 科学 与 技术 学 院 | 学 院 列表 可 用 
TEZ 单 击 并 选择 系 部 系 部 : 软件 工程 系 系 部 列表 可 用 
单 击 但 不 选择 班级 班级 : 信息 1201 班级 列表 可 用 
单 击 并 选择 学 院 学 院 : 信息 科学 与 技术 学 院 | 学 院 列表 可 用 
тсз 单 击 但 不 选择 系 部 系 部 : 空 系 部 列表 可 用 
单 击 并 选择 班级 班级 : 空 班级 列表 不 能 显示 对 应 数据 项 
单 击 并 选择 学 院 学 院 : 信息 科学 与 技术 学 院 | 学 院 列表 可 用 
TC4 单 击 但 不 选择 系 部 系 部 : 空 系 部 列表 可 用 
单 击 但 不 选择 班级 班级 : 空 班级 列表 不 能 显示 对 应 数据 项 
单 击 但 不 选择 学 院 学 院 : 空 学 院 列表 可 用 
ТС5 单 击 并 选择 系 部 系 部 : 空 系 部 列表 不 能 显示 对 应 数据 项 
单 击 并 选择 班级 班级 : 空 班级 列表 不 能 显示 对 应 数据 项 
单 击 但 不 选择 学 院 学 院 : 空 学 院 列表 可 用 
TC6 单 击 并 选择 系 部 系 部 : 空 系 部 列表 不 能 显示 对 应 数据 项 
单 击 但 不 选择 班级 班级 : 空 班级 列表 不 能 显示 对 应 数据 项 
单 击 但 不 选择 学 院 学 院 : 空 学 院 列表 可 用 
ТСТ 单 击 但 不 选择 系 部 系 部 : 空 系 部 列表 不 能 显示 对 应 数据 项 
单 击 并 选择 班级 班级 : 空 班级 列表 不 能 显示 对 应 数据 项 
单 击 但 不 选择 学 院 学 院 : 空 学 院 列表 可 用 
Tes 单 击 但 不 选择 系 部 系 部 : 空 系 部 列表 不 能 显示 对 应 数据 项 
单 击 但 不 选择 班级 班级 : 空 班级 列表 不 能 显示 对 应 数据 项 


决策 表 法 测试 的 优点 是 能 把 复杂 的 问题 按 各 种 可 能 的 情况 一 一 列举 出 来 ,简明 而 易 
于 理解 ,也 可 避免 遗漏 ,其 缺点 是 不 能 表达 重复 执行 的 动作 ,例如 循环 结构 。 
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3.5 因果 图 分 析 法 


前 面 介绍 的 等 价 类 划分 和 边界 值 分 析 这 两 种 方法 并 没有 考虑 到 输入 情况 的 各 种 组 
合 ,也 没有 考虑 到 各 个 输入 情况 之 间 的 依赖 关系 。 输 入 条 件 之 间 的 相互 组 合 ,可 能 会 产生 
一 些 新 的 情况 。 前 面 两 种 测试 方法 时 可 以 检测 到 各 个 输入 条 件 可 能 出 错 的 情况 , 却 忽略 
了 多 个 条 件 组 合 起 来 时 出 错 的 情况 。 但 要 检查 输入 条 件 的 组 合 不 是 一 件 容易 的 事情 , 即 
使 把 所 有 输入 条 件 划 分 成 等 价 类 ,它们 之 间 的 组 合 情 况 也 相当 多 。 因 此 必须 考虑 采用 一 
种 适合 于 描述 对 于 多 种 条 件 的 组 合 , 相 应 产生 多 个 动作 的 形式 来 考虑 设计 测试 用 例 , 这 就 
是 因果 图 分 析 法 。 


3.5.1 因果 图 法 的 含义 


因果 图 法 即 因果 分 析 图 ,又 叫 特性 要 因 图 ,石川 图 或 鱼翅 图 , 它 是 由 日 本 东京 大 学 教 
授 石川 声 提 出 的 一 种 通过 带 箭头 的 线 , 将 质量 问题 与 原因 之 间 的 关系 表示 出 来 ,是 分 析 影 
响 产品 质量 的 诸 因 素 之 间 关 系 的 一 种 工具 。 从 用 自然 语言 书写 的 程序 规格 说 明 的 描述 中 
找 出 因 ( 输 入 条 件 ) 和 果 ( 输 出 或 程序 状态 的 改变 ) ,可 以 生成 因果 图 。 

因果 图 法 是 一 种 适合 于 描述 对 于 多 种 输入 条 件 组 合 的 测试 方法 ,根据 输入 条 件 的 组 
合 , 约 东 关 系 和 输出 条 件 的 因果 关系 ,分 析 输 入 条 件 的 各 种 组 合 情 况 ,从 而 设计 测试 用 例 
的 方法 , 它 适合 于 检查 程序 输入 条 件 涉及 的 各 种 组 合 情 况 。 因 果 图 法 一 般 和 决策 表 结 合 
使 用 ,通过 映射 同时 发 生 相互 影响 的 多 个 输入 来 确定 判定 条 件 。 因 果 图 法 最 终生 成 的 就 
是 决策 表 , 它 适合 于 检查 程序 输入 条 件 的 各 种 组 合 情 况 。 采 用 因果 图 法 能 帮助 我 们 按照 
一 定 的 步骤 选择 一 组 高 效 的 测试 用 例 , 同 时 .还 能 指出 程序 规范 中 存在 什么 问题 ,鉴别 和 
制作 因果 图 。 

因果 图 法 着 重 分 析 输 入 条 件 的 各 种 组 合 . 每 种 组 合 条 件 就 是 * 因 ”, 它 必然 有 一 个 输出 
的 结果 ,这 就 是 “ 果 ”。 

利用 因果 图 导出 测试 用 例 一 般 要 经 过 以 下 几 个 步骤 

(1) 分 析 软 件 规格 说 明 的 描述 中 哪些 是 原因 ,哪些 是 结果 。 原 因 是 输入 条 件 的 等 价 
类 ,结果 是 输出 条 件 。 给 每 个 原因 和 结果 并 赋予 一 个 标识 符 , 根 据 这 些 关系 夯 出 因果 图 。 

(2) 因果 图 上 用 一 些 记号 表明 约束 条 件 或 限制 条 件 。 

(3) 对 需求 加 以 分 析 并 把 它们 表示 为 因果 图 之 间 的 关系 图 。 

(4) 把 因果 图 转换 成 决策 表 。 

(5) 将 决策 表 的 每 一 列 作为 依据 ,设计 测试 用 例 。 


3.5.2 因果 图 法 的 原理 


因果 图 法 中 使 用 的 基本 符号 如 图 3-10 所 示 。 左 结 点 表示 输入 状态 即 原因 , 右 结 点 表 
示 输 出 状态 即 结 果 。 
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黑 盒 测试 


《软件 测试 技术 教程 》 


Q 
© 人 
(--О (9) 
omg 中 或 
р (е) 
(е) (е) ло) 
(с) ЗЕ (d) 与 


图 3-10 因果 图 法 中 使 用 的 基本 符号 


恒 等 : 如 果 c 是 1, 则 e 也 是 1; 和 否则 e 是 0。 

或 V: 如 果 c 或 cz 或 cs 是 1, 则 e 也 是 1; 和 否则 e 是 0。 

E~: 如 果 c 是 1, 则 e 是 0; 否 则 e 是 1。 

与 人 : 如 果 с ЖІ с: 是 1, 则 е 也 是 1; 和 否则 е 是 0。 

约束 : 在 实际 问题 中 ,输入 状态 之 间 还 可 能 存在 某 些 依赖 关系 , 称 之 为 约束 。 例 如 ， 
某 些 输入 条 件 不 可 能 同时 出 现 。 在 因果 图 中 用 一 些 特殊 的 符号 表示 这 些 约束 ,如 图 3-11 


所 示 。 
© БЕС 
BS о 
-Ф -© 
(a) 异 或 wo 唯一 
© ©, 
к! 1м 
© о; 
(4) 要 求 (e) 强制 


图 3-11 因果 图 中 的 约 东 符号 


输入 条 件 的 约束 如 下 所 示 o 

E(Exclusive, 异 或 ): 表示 至 多 1 个 为 1。 如 在 图 3-11(a) 中 ,a 和 2 只 能 有 一 个 为 1 。 
I(Inclusive, 或 ): 表示 至 少 1 个 为 1。 如 在 图 3-11(b) 中 ,a 和 2 至少 有 一 个 为 1。 
O(One ала Only, 唯 一 ): 必 有 且 只 有 一 个 为 1。 如 在 图 3-11(c) 中 ,a 和 2 VMA H. 


仅 有 一 个 为 1。 
R(Require, 要 求 ): 表示 a 是 1, 则 6 必须 是 1, 参见 图 3-11(d) 。 
输出 条 件 的 约 东 如 下 所 示 。 


M(Mask, 强 制 ): 表示 a 是 1, 则 2 必须 是 0, 参见 图 3-11(e)。 
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测试 


3.5.3 因果 图 法 举例 


1. 某 个 软件 规格 说 明 书 


某 个 软件 规格 说 明 书 中 规定 : 第 一 列 字符 必须 是 * 或 # ,第 二 列 字符 必须 是 一 个 数 
字 , 在 此 情况 下 进行 文件 的 修改 ,但 如 果 第 一 列 字符 不 正确 , 则 给 出 信息 M; 如 果 第 二 列 
字符 不 正确 , 则 给 出 信息 N。 


软件 测试 的 设计 步骤 如 下 : 
首先 ,分 析 软 件 规格 说 明 书 找 出 原因 和 结果 。 
原因 


1 一 一 第 一 列 字符 是 * ; 
2 一 一 第 一 列 字 符 是 #; 
3 一 一 第 二 列 字符 是 一 个 数字 。 


结果 : 
21 一 一 修改 文件 ; 
22 一 一 给 出 信息 M; paa У 2—9 
23 一 一 给 出 信息 N。 ss 
其 次 , 找 出 原因 和 结果 之 间 的 因果 关系 , 原 Ө, SG 
因 与 原因 之 间 的 约 东 关系 , 画 出 如 图 3-12 所 示 O Е С 
的 因果 图 。 
第 三 ,根据 因果 图 建立 如 表 3-15 所 示 的 决 
策 表 和 测试 用 例 。 
表 3-15 根据 因果 图 建立 的 决策 表 和 测试 用 例 
列 项 1 2 3 4 5 6 
1 1 Ш 0 0 0 0 
原因 2 0 0 1 1 0 0 
3 1 0 1 0 1 0 
21 1 0 1 0 0 0 
结果 22 0 0 0 0 1 1 
23 0 1 0 1 0 1 
"3 “М #5 #N C2 DY 
ея ок N ok N M MN 


2. 中 国 象棋 中 跳马 
中 国 象棋 中 跳马 的 规则 如 下 : 
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(1) 如 果 落 点 在 棋盘 外 , 则 不 移动 棋子 。 

(2) 如 果 落 点 与 起 点 不 构成 日 字形 , 则 不 移动 棋子 。 

(3) 如 果 落 点 处 有 自己 方 棋子 , 则 不 移动 棋子 。 

(4) 如 果 落 点 方向 的 临近 交叉 点 有 棋子 ( 绊 马 腿 ) , 则 不 移动 棋子 。 

(5) 如 果 不 属于 前 4 条 , 且 落 点 处 无 棋子 , 则 移动 棋子 。 

(6) 如 果 不 属 于 前 4 条 , 且 落 点 处 为 对 方 棋子 ( 非 老 将 ), 则 移动 棋子 并 除去 对 方 
棋子 。 

D 如 果 不 属于 前 4 条 , 且 落 点 处 为 对 方 老将 , 则 移动 棋子 ,并 提示 战胜 对 方 ,游戏 


根据 题目 仔细 分 析 明 确 原因 和 结果 。 
首先 ,确定 原因 : 

1 一 一 落 点 在 棋盘 上 。 

2 一 一 落 点 与 起 点 构成 日 字 。 

3 一 一 落 点 处 为 自己 方 棋子 。 

4 一 一 落 点 方向 的 临近 交叉 点 无 棋子 。 
5 一 一 落 点 处 无 棋子 。 

6 一 一 落 点 处 为 对 方 棋子 ( 非 老将 ) 。 

7 一 一 落 点 处 为 对 方 老将 。 


其 次 ,确定 结果 : 
21 不 移动 棋子 。 
22 一 一 移动 棋子 。 


23 一 一 移动 棋子 ,并 除去 对 方 棋子 。 

24 一 一 移动 棋子 ,并 提示 战胜 对 方 ,结束 游戏 。 

增加 中 间 结 点 11, 同 时 考虑 结 点 5、.6、7 不 可 能 同时 发 生 要 加 蜡 或 约束 条 件 下 , 结 点 
21、22、23、24 加 唯一 约束 条 件 O。 生 成 如 图 3-13 所 示 的 “中 国 象棋 中 跳马 ?因果 图 。 


图 3-13 “中 国 象棋 中 跳马 ”因果 图 


第 三 步 , 根 据 因果 图 建立 如 表 3-16 所 示 的 “中 国 象棋 中 跳马 ”决策 表 。 
第 四 步 ,根据 决策 表 生 成 测试 用 例 , 此 处 略 。 
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表 3-16 “中 国 象棋 中 跳马 ?决策 表 


1 2 3 4 5 6 Я 8 9 10 | ІІ | 12 | 13 | 14 | 15 16 


1 0 1 0 1 0 1 0 1 0 1 0 1 0 1 0 1 


2|6|191:|1|0|6|1|11|19|9|11|1|01/01/1 1 
зо [о [о [о a {1 {11| о [о (о {о {1 |1 |1 1 
原因 | 4 о [о [о [о о [о [о [о 1 1 1 1 1 1 1 1 
5 | оо [1 |1 о [оі [1 оо |1 1|о|о т 1 
6 {оо [оо [11 [11 о [ооо 11| 1 1 
то [о [о о [о {о [оо {1 [111111 1 


22 0 0 1 0 0 0 0 
结果 

23 0 0 0 0 0 0 0 

24 0 0 0 0 0 0 1 


注释 : 表 中 1 一 16 列 中 空 的 单元 格 表示 不 可 能 发 生 的 现象 。 
3.6 正 交 实 验 设计 法 


当 用 因果 图 来 设计 测试 用 例 时 ,作为 输入 条 件 的 原因 与 输出 结果 之 间 的 因果 关系 有 
时 很 难 从 软件 需求 规格 说 明 中 得 到 ,因果 关系 非常 复杂 ,以 至 于 根据 因果 图 而 得 到 的 测试 
用 例 数目 常常 大 得 惊人 ,给 软件 测试 带 来 的 工作 量 巨 大 。 为 了 有 效 地 合理 地 减少 测试 的 
工时 与 费用 ,可 以 利用 正 交 实验 设计 方法 进行 测试 用 例 的 设计 。 


3.6.1 正 交 实验 设计 法 的 含义 


介绍 正 交 实验 设计 法 之 前 先 看 一 个 例子 。 

例如 ,要 测试 一 个 网 页 www. live. com, 

操作 系统 的 选择 : Windows NT4、Windows 2000, Windows XP, Windows Vista, 
Windows Server 2008 。 

台 的 选择 : 32 位 .64 位 。 

语言 的 选择 : 英文 、 德 文 . 中 文 。 

浏览 器 的 选择 : IE5 IE6 .IE7、FireFox。 

Javascript 的 选择 : 启用 .未 启用 。 

这 个 问题 的 测试 用 例 为 240, 即 5х2х3х4х2-240 种 组 合 。 这 么 多 的 情况 如 何 化 
简 呢 ? 解决 这 个 问题 就 可 以 用 到 正 交 实验 设计 法 。 
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1. 正 交 实验 设计 法 的 定义 


正 交 实 验 设计 法 (Orthogonal Experimental Design) 是 从 大 量 的 实验 点 中 选取 适量 
的 有 代表 性 的 点 ,应 用 依据 伽 罗 华 理 论 推导 出 的 正 交 表 ,合理 地 安排 实验 的 一 种 科学 的 实 
验 设计 方法 。 利 用 这 种 方法 ,可 使 所 有 的 因子 和 水 平 在 实验 中 均匀 且 分 配 与 搭配 ,均匀 且 
有 规律 地 变化 。 正 交 实验 设计 方法 是 依据 Galois 理论 ,从 大 量 的 实验 测试 数据 中 挑选 适 
量 的 .有 代表 性 的 数据 ,从 而 合理 地 安排 测试 的 一 种 科学 实验 设计 方法 。 


2. 正 交 表 的 构成 


行 数 (Runs) : 正 交 表 中 行 的 个 数 , 即 实验 的 次 数 , 也 是 人 们 通过 正 交 实验 法 设计 的 测 
试用 例 的 个 数 。 
因素 数 (Factors): 正 交 表 中 列 的 个 数 , 即 表 3-17 EL,(23) 正 交 表 
人 们 要 测试 的 功能 点 。 因素 数 
水 平 数 (Levels): 任何 单个 因素 能 够 取得 pA 
的 值 的 最 大 个 数 。 
正 交 表 的 形式 ， 1 
L# 数 (水 平 数 四 来 数 ) 2 
例如 ,Li(2) 的 正 交 表 如 表 3-17 所 示 。 3 
常用 的 有 Las(27)、Liz(224)、Lie(45) 等 ,更 4 
多 的 正 交 表 见 附 录 В. 


> 水 平 数 
2 


ыы 一 一 


3. 正 交 表 的 正 交 性 


1) 整齐 可 比 性 

在 同一 张 正 交 表 中 ,每 个 因素 的 每 个 水 平 出 现 的 次 数 是 完全 相同 的 。 由 于 在 实验 中 
每 个 因素 的 每 个 水 平 与 其 他 因素 的 每 个 水 平 参与 实验 的 几率 是 完全 相同 的 ,这 就 保证 在 
各 个 水 平 中 最 大 限度 地 排除 了 其 他 因素 水 平 的 干扰 。 因 而 ,能 最 有 效 地 进行 比较 和 作出 
展望 ,容易 找到 好 的 实验 条 件 。 

2) 均衡 分 散 性 

在 同一 张 正 交 表 中 ,任意 两 列 ( 两 个 因素 ) 的 水 平 搭配 (横向 形成 的 数字 对 ) 是 完全 相 
同 的 。 这 样 就 保证 了 实验 条 件 均 衡 地 分 散在 因素 水 平 的 完全 组 合 之 中 ,因而 具有 很 强 的 
代表 性 ,容易 得 到 好 的 实验 条 件 。 


4. 正 交 实验 法 设计 测试 用 例 


1) 用 正 交 表 设 计 测 试用 例 的 步骤 

(1) 有 哪些 因素 (变量 ) 。 

(2) 每 个 因素 有 哪 几 个 水 平 (变量 的 取 值 ) 。 
(3) 选择 一 个 合适 的 正 交 表 。 

(4) 把 变量 的 值 映射 到 表 中 。 
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(5) 把 每 一 行 的 各 因素 水 平 的 组 合作 为 一 个 测试 用 例 。 

(6) 加 上 自己 认为 可 疑 且 没有 在 表 中 出 现 的 组 合 。 

2) 如 何 选 择 正 交 表 

(1) 考虑 因素 (变量 ) 的 个 数 ; 

(2) 考虑 因素 水 平 (变量 的 取 值 ) 的 个 数 ; 

(3) 考虑 正 交 表 的 行 数 ; 

(4) 取 行 数 最 少 的 一 个 

3) 设计 测试 用 例 时 的 三 种 情况 

(1) 因素 数 (变量 ) 和 水 平 数 (变量 的 取 值 ) 都 相符 , 取 对 应 的 正 交 表 即 可 。 

(2) 水 平 数 (变量 的 取 值 ) 相 同 , 但 因素 数 不 相同 ,在 正 交 表 中 找 不 到 相同 的 因素 数 
(变量 ) , 取 因 素数 最 接近 但 略 大 的 实际 值 的 表 。 

(3) 水 平 数 不 相同 , 选 行 数 取 最 少 的 一 个 正 交 表 。 


3.6.2 正 交 实验 法 举例 


1. 网 络 调查 


某 大 学 进行 一 个 大 学 生 兴 趣 爱 好 调查 ,该 调查 对 话 框 如 图 3-14 所 示 。 可 以 看 到 要 测 
ening 网 络 ,体育 、 音 乐 舞蹈、 戏曲 和 其 他 ,也 就 是 要 考虑 的 因素 有 六 个 ;而 每 
个 因素 里 的 状态 有 两 个 : 填 或 者 不 填 。 


E Харан : 窗 体 DOR 


27-5 《 趣 爱好 
БЕНЕН 


图 3-14 大 学 生 兴趣 爱好 调查 对 话 框 


此 实例 符合 设计 测试 用 例 时 的 三 种 情况 的 第 二 种 情况 ,因素 数 不 相 同 。 

如 果 因 素数 不 同 的 话 , 可 以 采用 包含 的 方法 ,在 正 交 表 公式 中 找到 包含 该 情况 的 公 
式 , 如 果 有 N 个 符合 条 件 的 公式 ,那么 选取 行 数 最 少 的 公式 。 

1) 因素 数 和 水 平 数 

有 六 个 因素 : 网络、 体育、 音乐、 舞蹈 、 戏 曲 和 其 他 。 

每 个 因素 有 两 个 水 平 数 。 
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网 络 : 
体育 : 
音乐 : 
Жин. 
戏曲 : 
其 他 : 


Ж.Ж, 


Ж.Ж. 


Ж.Ж, 
填 . 不 填 。 
Ж.Ж, 


Ж.Ж, 


2) 选择 正 交 表 时 
表 中 的 因素 数 之 一 6。 


表 中 至 少 有 6 个 因素 的 水 平 数 之 一 2。 


行 数 取 最 少 的 一 个 。 


结果 为 Ls(27) ,如 表 3-18 所 示 。 


列 


列 


a 
% 


1.07) EZR 


4 


1 


0 


ар 


3) 变量 映射 


网 络 : 
体育 : 
音乐 : 
舞蹈 : 
戏曲 : 
其 他 : 


1-- 5,0-4, 
1 填写 .0~ 不 填 。 
1-~ 填 写 .0~~ 不 填 。 
1 习 填 写 .0 习 不 填 。 
1 一 填写 .0 一 不 填 。 
1 一 填写 .0 一 不 填 。 
变量 映射 如 表 3-19 所 示 o 
4) 用 Ls(27) 设 计 的 测试 用 例 


测试 用 例如 下 : 


ТСІ 


TC3 
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网 络 填写 、 体 育 填写 、 音 乐 填写 、 舞 路 
TC МАНУ ЖАНУ ЖАУ SHAD 
网 络 填写 、 体 育 不 填 、 音 乐 不 填 、 舞 蹈 填 


5., 


ж 
x 


填写 、 其 他 填写 


不 填 、 其 他 不 填 
填写 、 其 他 不 填 
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93-19 变量 映射 

列 列 号 
行 网 络 体育 音乐 жын 戏曲 其 他 7 
1 填写 填写 填写 填写 填写 填写 1 
2 填写 填写 填写 不 填 不 填 不 填 0 
3 填写 不 填 不 填 填写 填写 不 填 0 
行 4 填写 不 填 不 填 不 填 不 填 填写 1 
号 5 不 填 填写 不 填 填写 不 填 填写 0 
6 不 填 填写 不 填 不 填 填写 不 填 1 
7 жің 不 填 填写 填写 ж 不 填 1 
8 жің 不 填 填写 不 填 填写 填写 0 


TC4 ”网 络 填写 ,体育 不 填 、 音 乐 不 填 、 舞 蹈 不 填 、 戏 曲 不 填 、 其 他 填写 
TC5 网络 不 填 、 体 育 填写 、 音 乐 不 填 、 舞 蹈 填写 、 戏 曲 不 填 、 其 他 不 填 
TC6 ”网络 不 填 、 体 育 填写 、 音 乐 不 填 、 舞 蹈 不 填 、 戏 曲 填 写 、 其 他 填写 
TC7 ”网络 不 填 、 体 育 不 填 、 音 乐 填写 、 舞 蹈 填写 、 戏 曲 不 填 、 其 他 填写 
TC8 网络 不 填 、 体 育 不 填 、 音 乐 填写 、 钴 蹈 不 填 、 戏 曲 填写 、 其 他 不 填 
增补 测试 用 例 : 

TC9 Мета Ны PRIE Ы ТӘН АІ ТӘН, Жай 
TC10 网络 不 填 、 体 育 不 填 、 音 乐 填写 、 舞 蹈 不 填 、 戏 曲 不 填 、 其 他 不 填 
TC 网 络 不 填 、 体 育 不 填 、 音 乐 不 填 、 舞 蹈 填写 、 戏 曲 不 填 、 其 他 不 填 
TC12 网 络 不 填 、 体 育 不 填 、 音 乐 不 填 、 舞 蹈 不 填 、 戏 曲 填写 .其 他 不 填 
测试 用 例 数 由 32 个 减少 为 12 个 。 


2. PowerPoint 软件 打印 功能 


以 PowerPoint 软件 打印 功能 作为 例子 ,符合 设计 测试 用 例 时 的 第 三 种 情况 ,如 表 3-20 
所 示 。 


表 3-20 因子 和 水 平 数 表 


编号 A 打印 范围 B 打印 内 容 C 打印 颜色 / 灰 度 D 打印 效果 
0 全 部 幻灯 片 颜色 幻灯 片 加 框 
1 当前 幻灯 片 讲义 灰 度 幻灯 片 不 加 框 
2 给 定 范围 备注 页 黑白 
3 大 岗 视图 
功能 描述 如 下 。 


打印 范围 分 三 种 情况 : 全 部 、 当 前 幻灯 片 给 定 范围 。 
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打印 内 容 分 四 种 方式 : ТН А Е KARE. 
打印 颜色 / 灰 度 分 三 种 设置 : 颜色 . 灰 度 .黑白 。 
打印 效果 分 两 种 方式 : 幻灯 片 加 框 和 幻灯 片 不 加 框 。 

先 将 中 文字 转换 成 字母 ,便于 设计 ,如 表 3-21 所 示 。 


表 3-21 因子 和 水 平 数 表 


编号 A B C D 
0 Al Bl сі D1 
1 А2 B2 C2 D2 
2 A3 B3 C3 
3 B4 

下 面 分 析 一 下 : 
被 测 项 目 中 一 共有 四 个 被 测 对 象 ,每 个 被 测 对 象 的 状态 都 不 一 样 。 
选择 正 交 表 : 


(1) 表 中 的 因子 数 三 4。 

(2) 表 中 至 少 有 4 个 因子 的 水 平 数 三 2。 

(3) 行 数 取 最 少 的 一 个 。 

最 后 选中 正 交 表 公式 : Lis(4), 如 表 3-22 所 示 , 用 字母 替代 如 表 3-23 所 示 。 


表 3-22 Le(4:) 正 交 表 


编 号 1 2 3 4 5 
1 0 0 0 0 0 
2 0 1 1 1 1 
3 0 2 2 2 2 
4 0 3 3 3 3 
5 1 0 1 2 3 
6 1 1 0 3 2 
7 1 2 3 0 1 
8 1 3 2 1 0 
9 2 0 2 3 1 

10 2 1 3 2 0 
11 2 2 0 1 3 
12 2 3 1 0 2 
13 3 0 3 1 2 
14 3 Ж 2 0 3 
15 3 2 1 3 0 
16 3 3 0 2 1 
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表 3-23 用 字母 蔡 代 Lie (4 ) 正 交 表 


编 号 1 2 3 4 5 
1 А1 ВІ сі D1 0 
2 Al B2 C2 D2 1 
3 Al B3 C3 2 2 
4 Al B4 3 3 3 
5 А2 ВІ с? 2 3 
6 A2 B2 Cl 3 2 
7 A2 B3 3 D1 1 
8 А2 ВА ез р2 0 
9 АЗ ВІ сз 3 1 
10 АЗ B2 3 2 0 
11 A3 B3 СІ р2 3 
12 АЗ ВА C2 D1 2 
13 3 ВІ 3 р2 2 
14 3 B2 сз D1 3 
15 3 B3 C2 3 0 
16 3 B4 Cl 2 1 


可 以 看 到 : 第 一 列 水 平 值 为 3、 第 三 列 水 平 值 为 3、 第 四 列 水 平 值 3、2 都 需要 由 各 自 
的 字母 替代 。 这 样 ,将 组 合 数 从 3X4X3X2 一 72 个 降 为 16 个 ,大 大 减少 了 工作 量 。 

正 交 实验 设计 适用 于 大 量 因子 都 对 结果 产生 较 大 影响 的 情况 ,利用 正 交 实验 设计 法 
对 大 量 组 合 进 行 简化 ,兼顾 测试 成 本 与 测试 充分 性 的 均衡 ,提高 测试 效率 。 

正 交 实验 设计 方法 的 简化 依据 是 科学 的 ,并 非 盲 目的 简化 。 利 用 这 种 方法 ,可 使 所 有 
的 因子 和 水 平 在 实验 中 均匀 地 分 配 与 搭配 ,均匀 上 且 有 规律 地 变化 。 对 被 测试 的 软件 来 说 ， 
测试 用 例 的 涉及 范围 在 整体 上 说 比较 均匀 ,可 排除 偏向 某 个 功能 局 部 的 可 能 性 , 它 与 结构 
测试 相配 合 , 可 以 发 现 大 部 分 的 错误 。 有 一 个 实例 ,1992 年 AT&T 发 表 了 一 篇 讲述 在 测 
试 过 程 中 使 用 正 交 表 一 个 案例 研究 。 它 描述 了 对 РССІВМ 格式 ) 和 StarMail( 基 于 局 域 
网 的 电子 邮件 软件 ) 做 回归 测试 。 最 初 制定 的 测试 计划 是 用 18 周 的 时 间 执 行 1500 个 测 
试用 例 。 但 是 ,开发 推迟 了 ,测试 时 间 被 压缩 到 仅仅 8 周 时 间 。 测 试 负责 人 采取 另外 一 
个 测试 方案 和 计划 , 即 2 个 人 8 周 的 时 间 测 试 1000 个 测试 用 例 , 但 是 他 不 敢 保证 测试 的 
质量 ,对 这 些 用 例 检 测 缺 陷 的 能 力 不 放 心 。 为 了 减轻 这 种 不 确定 性 的 问题 ,他 用 正 交 表 法 
重新 设计 了 测试 用 例 ,此 时 测试 用 例 只 有 422 个 。 用 这 422 个 测试 用 例 去 测试 发 现 了 41 
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个 缺陷 ,开发 人 员 修 复 缺陷 ,然后 发 布 软件 。 在 使 用 的 两 年 时 间 内 , 凡 被 测试 到 的 领域 都 
没有 再 发 现 缺陷 ,因此 在 发 现 缺 陷 这 方面 :此 测试 计划 是 100% 有效 。 据 测试 负责 人 佑 
计 , 如 果 AT&T 采用 1000 个 测试 用 例 的 测试 计划 ,可 能 仅仅 只 发 现 这 些 缺 陷 中 的 32 个 
与 最 初 的 计划 相 比 ,用 正 交 表 设 计 测试 用 例 执行 工作 量 不 到 50% ,但 却 多 发 现 28% 的 缺 
陷 , 而 且 测试 人 员 个 人 的 效率 也 增加 了 。 


3.7 黑 盒 测 试 方法 比较 


黑 盒 测试 方法 的 共同 特点 是 它们 都 把 程序 看 作 是 一 个 打 不 开 的 黑 盒 , 只 知道 输入 到 
输出 的 映射 关系 ,根据 规范 说 明 设计 测试 用 例 。 同 时 ,它们 也 有 明显 的 不 同 点 : 

(1) 等 价 类 分 析 测试 中 ,通过 等 价 类 划分 来 减少 测试 用 例 的 绝对 数量 。 

(2) 边界 值 分 析 方法 则 通过 分 析 输 入 变量 的 边界 值 域 设计 测试 用 例 。 

(3) 决策 表 方法 全 面 地 列 出 可 能 输入 组 合 ,并 通过 制约 关系 和 合并 的 方法 来 减少 测 
试用 例 。 

(4) 因果 图 测试 方法 考虑 到 输入 条 件 和 输出 结果 间 的 依赖 关系 和 制约 关系 。 

(5) 正 交 法 在 大 量 的 输入 组 合 情 况 下 可 以 有 效 地 减少 测试 用 例 。 


1. 黑 盒 测试 的 工作 量 和 有 效 性 


1) 测试 工作 量 

以 边界 值 分 析 、 等 价 类 划分 和 决策 表 测试 方法 来 讨论 它们 的 测试 工作 量 , 即 生成 测试 
用 例 的 数量 与 开发 这 些 测 试用 例 所 需 的 工作 量 。 

边界 值 分 析 不 考虑 数据 或 逻辑 依赖 关系 ,机械 地 根据 各 边界 生成 测试 用 例 , 测 试用 例 
数 较 多 ;等 价 类 划分 则 关注 数据 依赖 关系 和 函数 本 身 , 考 虑 如 何 划分 等 价 类 ,随后 也 是 机 
械 地 生成 测试 用 例 ,测试 用 例 数 减少 ;决策 表 技术 最 精细 , 既 要 考虑 数据 ,又 要 考虑 逻辑 依 
赖 关系 ,测试 用 例 数 又 减少 ; 正 交 法 可 以 有 效 地 减少 测试 用 例 数 。 

2) 测试 有 效 性 

解释 测试 有 效 性 是 困难 的 。 因 为 人 们 不 知道 程序 中 的 所 有 故障 ,因此 也 不 可 能 知道 
给 定 方法 所 产生 的 测试 用 例 是 否 能 够 发 现 这 些 故障 。 所 能 够 做 的 ,只 是 根据 不 同类 型 的 
故障 ,选择 最 有 可 能 发 现 这 种 缺陷 的 测试 方法 (包括 白 盒 测试 )。 根 据 最 可 能 出 现 的 故障 
种 类 ,分 析 得 到 可 提高 测试 有 效 性 的 实用 方法 。 通 过 跟踪 所 开发 软件 中 故障 的 种 类 和 密 
度 ,也 可 以 改进 这 种 方法 。 


2. 黑 盒 测试 的 选择 


1) 关注 相关 属性 问题 

变量 是 否 表示 物理 量 或 逻辑 量 ? 
在 变量 之 间 是 否 存 在 依赖 关系 ? 
是 假设 单 缺陷 ,还 是 假设 多 缺陷 ? 
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是 否 有 大 量 例外 处 理 ? 
2) 黑 盒 测 试 选择 办 法 
如 果 变 量 是 独立 的 ,可 采用 边界 值 分 析 测 试 和 等 价 类 测试 。 
如 果 变 量 引用 的 是 物理 量 ,可 采用 边界 值 分 析 测 试 和 等 价 类 测试 。 
如 果 可 保证 是 单 缺陷 假设 ,可 采用 边界 值 分 析 和 健壮 性 测试 。 
如 果 变 量 不 是 独立 的 ,可 采用 决策 表 测 试 。 
如 果 程 序 包含 大 量 例外 处 理 , 可 采用 健壮 性 测试 和 决策 表 测试 。 
如 果 变 量 引 用 的 是 逻辑 量 , 可 采用 等 价 类 测试 用 例 和 决策 表 测试 。 
如 果 测 试 组 合 很 多 ,或 多 因子 ,多 水 平 ,采用 正 交 法 可 以 有 效 地 减少 测试 用 例 数 。 
如 果 是 参数 配置 类 的 软件 ,要 用 正 交 实 验 法 选择 较 少 的 组 合 方式 达到 最 佳 效 果 。 
3) 黑 盒 测试 选择 策略 
软件 测试 领域 的 著名 学 者 Myers 对 黑 盒 测 试 选择 策略 总 结 如 下 : 
首先 ,进行 等 价 类 划分 ,包括 输入 条 件 和 输出 条 件 的 等 价 划分 ,将 无 穷 多 的 测试 用 例 
减少 成 有 限 的 测试 用 例 , 这 是 减少 工作 量 和 提高 测试 效率 最 有 效 的 方法 。 
其 次 ,几乎 在 任何 情况 下 都 必须 使 用 边界 值 分 析 方法 。 实 践 经 验 显 示 ,这 种 方法 发 现 
软件 错误 的 能 力 很 强 。 
第 三 ,可 依靠 测试 工程 师 的 经 验 , 用 错误 猜测 法 补充 一 些 测试 用 例 。 
第 四 ,如 果 程 序 的 功能 说 明 中 含有 输入 条 件 的 组 合 关系 或 者 约束 关系 ,用 等 价 类 划分 
法 和 边界 值 分 析 法 很 难 描述 , 则 用 因果 图 法 和 决策 表 法 。 
第 五 , 当 测 试 参数 选择 或 配置 类 的 软件 时 ,要 用 正 交 实验 法 减少 测试 用 例 ,选择 比较 
少 的 测试 用 例 达 到 最 佳 效 果 。 


习题 


1. 什么 是 黑 盒 测 试 ? 

2. 简 述 黑 盒 测 试 的 优点 和 缺点 。 

3. 什么 是 等 价 类 ? 

4. 程序 要 求 某 个 输入 为 6 位 正 整数 ,试用 等 价 类 划分 法 设计 有 效 等 价 类 、 无 效 等 价 
类 测试 用 例 。 

5. 选择 边界 值 测试 主要 考虑 的 原则 是 什么 ? 

6. 有 一 个 处 理 单价 为 5 角 钱 的 饮料 自动 售 货 机 软件 测试 用 例 的 设计 。 操 作 说 明 
ШЕ. 

(1) 若 投入 5 角 钱 , 按 下 “橙汁 ?或 “啤酒 ?的 按钮 , 则 相应 的 饮料 就 送出 来 。 

(2) 投入 1 元 硬币 并 按 下 按钮 后 , 售 货 机 没有 零钱 找 , 则 一 个 显示 “零钱 找 完 ” 的 红 灯 
亮 ,这 时 在 投入 1 元 硬币 并 按 下 按钮 后 ,饮料 不 送出 来 ,1 元 硬币 也 退出 来 。 

(3) 投入 1 元 硬币 并 按 下 按钮 后 , 售 货 机 有 和 零钱 找 , 则 显示 “零钱 找 完 ” 的 红 灯 灭 ,在 
送出 饮料 的 同时 退还 5 角 硬 币 。 
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根据 题 意 设计 因果 图 ,并 将 因果 图 转化 为 决策 表 。 

Т. 某 个 人 信息 查询 对 话 框 如 图 3-15 所 示 ,对 话 框 中 有 三 个 控件 : 姓名 、 身 份 证 号 、 电 
话 号 码 , 每 个 控件 填写 状态 有 两 个 : 填 与 不 填 。 试 用 正 交 实 验 法 测试 ,选择 什么 正 交 表 ? 
并 根据 自己 选择 的 正 交 表 设 计 测试 用 例 。 


Е 个 人 信息 查询 : 窗 体 


图 3-15 个 人 信息 查询 对 话 框 


8. 试 对 黑 盒 测试 方法 进行 比较 ,并 说 明 对 不 同情 况 如 何 做 出 选择 。 
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第 4 章 НЕЙ 


白 盒 测试 是 软件 测试 的 核心 测试 方法 之 一 ,是 本 书 的 重点 内 容 。 本 章 主 要 讲解 白 盒 
测试 的 基本 概念 和 技术 ,包括 白 盒 测试 概述 、 人 逻辑 覆盖 测试 .程序 持 装 测试 .程序 变异 测 
试 . 循 环 测试 和 代码 审查 。 代 码 审查 分 为 桌 前 检查 .代码 评审 .同行 评审 .代码 走 查 、 基 于 
缺陷 模式 测试 等 ,用 比较 多 的 篇 幅 讲 解 了 基于 缺陷 模式 的 测试 。 本 章 不 但 介绍 常见 的 白 
盒 测 试 方法 ,而 且 通 过 实例 说 明 如 何 运用 白 盒 测试 技术 。 


41 白 盒 测试 概述 


白 盒 测试 是 软件 测试 实践 中 最 为 有 效 和 实用 的 方法 之 一 。 白 盒 测试 是 基于 程序 的 测 
试 ,检测 产品 的 内 部 结构 是 否 合理 以 及 内 部 操作 是 否 按 规定 执行 。 逻 辑 覆 盖 测 试 是 白 盒 
测试 的 重点 ,六 种 覆盖 标准 为 语句 覆盖 判定 覆盖 ,条件 覆盖 、 判 定 /条 件 覆 盖 ДЕА 
盖 和 路 径 覆 盖 。 


4.1.1 白 盒 测试 含义 


白 盒 测试 中 的 “ 白 盒 ”是 指 可 视 性 “盒子 ?这 里 指 被 测试 的 软件 。 白 盒 测 试 ( White 
Вох Testing) 又 称 结构 测试 ,透明 盒 测试 .逻辑 驱动 测试 或 基于 代码 的 测试 。 白 盒 测试 是 
一 种 测试 用 例 设计 方法 “盒子 ? 指 的 是 被 测试 的 软件 ， 白 盒 指 的 是 盒子 是 可 视 的 ,测试 
者 清楚 盒子 内 部 的 东西 以 及 里 面 是 如 何 运作 的 。 白 盒 测试 法 全 面 了 解 程序 内 部 多 辑 结 
构 、. 对 所 有 逮 辑 路 径 进行 测试 。 在 使 用 这 种 方法 时 ,测试 者 必须 检查 程序 的 内 部 结构 ,从 


检查 程序 的 逻辑 着 手 , 得 出 测试 数据 。 由 于 这 种 方法 按照 Ен 
程序 内 部 的 逻辑 进行 测试 ,检验 程序 中 的 每 条 通路 是 否 都 ”输入 РА 
能 按 预 定 要 求 正 确 工作 ,所 以 白 盒 测试 又 称 为 结构 测试 。 一 < 


白 盒 测试 示意 图 如 图 4-1 所 示 。 

通过 检查 软件 内 部 的 逻辑 结构 ,对 软件 中 的 逻辑 路 径 
进行 覆盖 测试 ;在 程序 不 同 地 方 设立 检查 点 ,检查 程序 的 状态 ,以 确定 实际 运行 状态 与 预 
期 状态 是 否 一 致 。 它 允许 测试 人 员 根 据 程序 内 部 逻辑 结构 及 有 关 信 息 来 设计 和 选择 测试 
用 例 , 对 程序 的 逻辑 进行 测试 ,提高 代码 质量 。 

下 面 是 白 盒 测试 的 实施 步骤 。 

СТ) 测试 计划 阶段 : 根据 需求 说 明 书 ,制定 测试 进度 。 

(2) 测试 设计 阶段 : 依据 程序 设计 说 明 书 ,按照 一 定 规范 化 的 方法 进行 软件 结构 划 
分 和 设计 测试 用 例 。 

(3) 测试 执行 阶段 : 输入 测试 用 例 ,得 到 测试 结果 。 


图 4-1 白 盒 测试 示意 图 


《软件 测试 技术 教程 》 | 第 4 章 


(4) 测试 总 结 分 析 阶 段 : 对 比 测试 的 结果 和 代码 的 预期 结果 ,分 析 错 误 原 因 ,找到 并 
解决 错误 。 
在 白 盒 测试 中 ,通常 会 用 覆盖 率 来 度量 测试 的 完整 性 。 测 试 覆盖 率 是 程序 被 一 组 测 
试用 例 执 行 到 的 百分比 。 
覆盖 率 至 少 被 执行 一 次 的 被 测试 项 数 
被 测试 项 总 数 
白 盒 测试 方法 需要 遵循 的 基本 原则 : 
(1) 保证 一 个 模块 中 所 有 独立 路 径 至 少 被 测试 一 次 。 
(2) 所 有 逻辑 值 均 需 测试 真 (true) 和 假 (false) 两 个 分 支 。 
(3) 检查 程序 的 内 部 数据 结构 ,保证 其 结构 的 有 效 性 。 
(4) 在 上 下 边界 及 可 操作 范围 内 运行 所 有 循环 。 
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41.2 黑 盒 测试 和 白 盒 测试 的 比较 


白 盒 测试 考虑 了 黑 盒 测试 不 考虑 的 方面 。 同 样 地 , 黑 盒 测试 也 考虑 了 和 白 盒 测试 不 考 
虑 的 方面 。 白 盒 测试 只 考虑 测试 软件 产品 , 它 不 保证 完整 的 需求 规格 是 否 被 满足 。 而 黑 
盒 测 试 只 考虑 测试 需求 规格 , 它 不 保证 实现 的 所 有 部 分 是 否 被 测试 到 。 黑 盒 测试 会 发 现 
遗漏 的 缺陷 ,指出 规格 的 哪些 没有 完成 。 而 白 盒 测试 会 发 现 人 逻辑 方面 的 缺陷 ,指出 哪些 是 
错误 的 。 

白 盒 测试 比 黑 盒 测试 成 本 高 。 白 盒 测 试 需要 在 测试 计划 前 产生 源 代码 ,并 且 在 确定 
合适 的 数据 和 软件 是 否 正确 方面 需要 花费 更 多 的 工作 量 。 白 盒 测试 计划 应 当 在 黑 盒 测 试 
计划 成 功 通过 之 前 就 开始 ,使 用 已 经 产生 的 流程 图 和 路 径 判 定 。 


1. 黑 盒 测试 的 优 缺 点 


D 黑 盒 测试 的 优点 

(1) 测试 员 和 程序 员 可 以 由 不 同 的 人 员 来 担任 。 

(2) 对 于 子 系统 甚至 系统 ,效率 要 比 白 盒 测 试 高 。 

(3) 对 于 较 大 的 代码 单元 来 说 ,效率 高 。 

(4) 测试 人 员 不 需要 了 解 实现 的 细节 ,包括 特定 的 编程 语言 。 
(5) 从 用 户 的 视角 进行 测试 ,很 容易 理解 和 接受 。 

(6) 有 助 于 暴露 规格 的 不 一 致 或 有 歧义 的 问题 。 

(7) 测试 用 例 的 设计 可 以 在 规格 说 明 完 成 之 后 马上 进行 。 
(8) 测试 用 例 可 以 反复 使 用 。 

(9) 容易 入 手 生成 测试 数据 。 

(10) 适用 于 各 阶段 测试 。 

2) 黑 盒 测 试 的 缺点 

(1) 实际 只 有 一 小 部 分 输入 被 测试 到 ,要 测试 每 个 可 能 的 输入 几乎 不 可 能 。 
(2) 没有 清晰 ,简明 的 规格 ,测试 用 例 很 难 设计 。 
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(3) 如 果 测 试 人 员 不 被 告知 开发 人 员 已 经 执行 过 的 用 例 , 在 测试 数据 上 会 存在 重复 。 

(4) 有 很 多 程序 路 径 没 有 被 测试 到 。 

(5) 不 能 直接 针对 特定 程序 段 测试 ,而 这 些 程序 段 可 能 很 复杂 ,有 可 能 隐藏 更 多 
问题 。 

(6) 大 部 分 和 研究 相关 的 测试 都 是 直接 针对 白 盒 测试 。 

(7) 如 果 规 格 说 明 有 误 , 则 无 法 发 现 。 

(8) 不 易 进 行 充分 性 测试 。 


2. 白 盒 测试 的 优 缺 点 


D 白 盒 测试 的 优点 

(1) 可 以 检测 代码 中 的 每 条 分 支 和 路 径 。 
(2) 能 仔细 考虑 软件 的 实现 。 

(3) 揭示 隐藏 在 代码 中 的 错误 。 

(4) 对 代码 的 测试 比较 彻底 。 

(5) 有 较 多 工具 支持 。 

(6) 有 一 定 的 充分 性 度量 手段 。 

2) 白 盒 测 试 的 缺点 


(1) 工作 量 大 ,代价 比较 昂贵 ,通常 只 用 于 单元 测试 ,有 
应 用 局 限 。 


(2) 无 法 检测 代码 中 遗漏 的 路 径 和 数据 敏感 性 错误 。 
(3) 不 验证 系统 的 正确 性 。 
(4) 无 法 对 规格 说 明 中 未 实现 的 部 分 进行 测试 。 
白 盒 测试 和 黑 盒 测 试 能 够 发 现 的 错误 如 图 4-2 所 示 。 842 白金 测试 和 黑金 测试 
А 只 能 用 黑 念 测试 发 现 的 错误 ЕВИ 
С 只 能 用 白 盒 测试 发 现 的 错误 ， 
В ”用 黑 盒 和 白 盒 测 试 都 能 发 现 的 错误 ， 
р 用 黑 合 和 白 盒 测 试 都 不 能 发 现 的 错误 ; 
А-В ”能 用 黑 盒 测试 发 现 的 错误 ， 
B+C 能 用 白 盒 测试 发 现 的 错误 ， 
A 十 B 十 C ”用 黑 合 和 和 白 盒 测试 发 现 的 错误 ; 
А+В+С+Ю 软件 中 的 全 部 错误 。 
白 盒 测试 和 黑 盒 测试 的 比较 如 表 4-1 所 示 。 
жал 白 盒 测 试 和 黑 盒 测 试 的 比较 
列 项 黑 盒 测试 白 盒 测试 


只 关心 软件 的 外 部 表现 ,不 关心 内 部 设计 | 关注 软件 的 内 部 设计 与 实现 ,要 跟踪 
与 实现 源 代码 的 运行 


依据 需求 说 明 、 概 要 设计 说 明 详细 设计 说 明 
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(ижа) БУЕ 


аж 
列 项 黑 盒 测试 白 盒 测 试 

面向 输入 输出 接口 /功能 要 求 程序 结构 

适用 组 装 、 系 统 测试 单元 测试 

规模 大 规模 测试 小 规模 测试 

程序 结构 未 知 程序 结构 已 知 程序 结构 

测试 人 员 专门 测试 人 员 或 外 部 人 员 开发 人 员 

测试 驱动 程序 一 般 无 须 编写 额外 的 测试 驱动 程序 需要 编写 额外 的 测试 驱动 程序 


4.1.3 静态 测试 和 动态 测试 


从 是 否 运 行程 序 的 方面 看 ,软件 测试 可 以 分 为 静态 测试 和 动态 测试 。 
1. 静态 测试 


静态 测试 是 指 不 运行 程序 ,通过 人 工 对 程序 和 文档 进行 分 析 与 检查 。 苦 态 测试 采用 
人 工 检测 和 计算 机 辅助 静态 分 析 手 段 进行 检测 ,充分 发 挥 人 的 逻辑 思维 优势 ,也 可 以 借助 
软件 工具 自动 进行 。 

静态 测试 就 是 静态 地 检查 程序 代码 ,界面 或 文档 中 可 能 存在 的 错误 的 过 程 。 

从 概念 中 可 知 ,其 包括 对 代码 测试 、 界 面 测试 和 文档 测试 三 个 方面 : 

(1) 对 于 代码 测试 ,主要 测试 代码 是 否 符合 相应 的 标准 和 规范 。 

(2) 对 于 界面 测试 ,主要 测试 软件 的 实际 界面 与 需求 中 的 说 明 是 否 相符 。 

(3) 对 于 文档 测试 ,主要 测试 用 户 手 册 和 需求 说 明 是 否 符合 用 户 的 实际 需求 。 

对 程序 代码 的 静态 测试 需要 按照 相应 的 代码 规范 模板 逐 行 检查 程序 代码 。 很 多 大 公 
司 内 部 一 般 都 有 自己 的 编码 规范 ,比如 “C/C++ 编码 规范 ”, 只 需要 按照 上 面 的 条 目 逐 条 
测试 就 可 以 了 。 当 然 很 多 白 盒 测试 工具 中 就 自动 集成 了 各 种 语言 的 编码 规范 ,只 要 单 击 
一 个 按钮 ,这 些 工具 就 会 自动 检测 代码 中 不 符合 语法 规范 的 地 方 , 非 常 方便 。 


2. 动态 测试 


动态 方法 是 指 通 过 运行 被 测 程序 ,检查 运行 结果 与 预期 结果 的 差异 ,并 分 析 运 行 效率 
和 健壮 性 等 性 能 。 判 断 一 个 测试 属于 动态 测试 还 是 静态 的 ,唯一 的 标准 就 是 看 是 否 运行 
程序 。 

动态 测试 技术 主要 包括 程序 插 桩 、 催 辑 覆 盖 、 基 本 路 径 测 试 等 。 


з. 黑 盒 测试 、 白 盒 测试 动态 测试 .静态 测试 之 间 的 关系 


不 同 的 测试 方法 各 自 的 目标 和 侧重 点 不 一 样 ,在 实际 工作 中 应 将 这 两 种 方法 结合 起 
来 运用 ,以 达到 更 完美 的 效果 。 
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白 盒 测试 


以 上 的 测试 方法 各 有 所 长 ,每 种 方法 都 可 设计 出 一 组 有 用 的 例子 ,用 这 组 测试 用 例 可 
以 比较 容易 地 发 现 某 种 类 型 的 错误 , 却 不 易 发 现 另 一 种 类 型 的 错误 。 因 此 在 实际 测试 中 ， 
应 结合 各 种 测试 方法 ,形成 综合 策略 。 在 单元 测试 主要 用 白 盒 测试 ;在 系统 测试 时 主要 用 
黑 盒 测 试 ,或 者 以 黑 盒 测 试 为 主要 测试 方法 , 白 盒 测试 为 辅助 方法 等 。 

黑 盒 测试 . 白 盒 测 试 .动态 测试 .静态 测试 之 间 的 关系 : 

СТ) 测试 的 角度 不 同 而 已 ,同一 个 测试 , 既 有 可 能 是 黑 盒 测试 ,也 有 可 能 是 动态 测试 ; 
既 有 可 能 是 静态 测试 ,也 有 可 能 是 白 盒 测试 。 

(2) 黑 盒 测试 有 可 能 是 动态 测试 , 即 运行 程序 看 输入 输出 ;也 有 可 能 是 静态 测试 , 即 
不 运行 只 看 界面 。 

(3) 白 盒 测试 有 可 能 是 动态 测试 , 即 运行 程序 并 分 析 代 码 结构 :也 有 可 能 是 静态 测 
试 , 即 不 运行 程序 ,做 代码 走 查 等 。 

(4) 动态 测试 有 可 能 是 黑 盒 测 试 , 即 运行 程序 只 看 输入 输出 ;也 有 可 能 是 白 盒 测试 ， 
即 运 行 并 分 析 代码 结构 。 

(5) 静态 测试 有 可 能 是 黑 盒 测 试 , 即 不 运行 程序 只 查看 界面 ;也 有 可 能 是 白 盒 测试 ， 
即 不 和 运行 程序 做 文档 测试 等 。 


4.1.4 程序 流程 图 和 控制 流 图 


白 盒 测试 是 对 软件 产品 内 部 逻辑 结构 进行 测试 的 ,测试 人 员 必 须 对 测试 中 的 软件 有 
深入 的 理解 ,包括 其 内 部 结构 .各 单元 部 分 及 之 间 的 内 在 联系 ,还 有 程序 运行 原理 等 。 程 
序 流 程 图 (Flowchart) 又 称 框图 ,是 程序 设计 时 大 家 最 为 熟悉 的 ,如 图 4-3 所 示 。 为 了 更 加 
突出 程序 的 内 部 结构 ,便于 测试 人 员 理 解 源 代码 ,可 以 对 程序 流程 图 进行 简化 ,生成 控制 流 
图 (Control Flow Graph)。 简 化 后 的 控制 流 图 是 由 结 点 和 控制 边 组 成 的 ,如 图 4-4 所 示 。 


24 
= 


图 4-3 程序 流程 图 图 4-4 控制 流 图 


在 控制 流 图 中 有 两 种 符号 : 结 点 ,控制 流 线 或 弧 。 

яң. 以 有 编号 的 圆圈 表示 。 代 替 操 作 、 条 件 判 断 及 汇合 点 ,表示 一 个 或 多 个 无 分 支 
的 源 程序 语句 。 

控制 流 线 或 弧 : 以 带 箭 头 的 线 或 弧 表 示 ,代表 控制 流 的 方向 ,如 图 4-4 中 的 a、b、c、d、 
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е. 所 示 。 

控制 流 图 有 以 下 两 个 特点 : 

具有 唯一 入 口 结 点 ,表示 程序 段 的 开始 语句 。 
具有 唯一 出 口 结 点 ,表示 程序 段 的 结束 语句 。 
常见 的 控制 流 如 图 4-5 所 示 。 


4.2 


逻辑 覆盖 测试 (Logic Coverage Testing) 简 称 逻 辑 覆 盖 法 是 以 程序 内 部 的 逻辑 结构 
为 基础 设计 测试 用 例 的 方法 。 因 为 不 可 能 进行 穷尽 的 测试 ,有 选择 的 执行 程序 中 某 些 最 


5 


(а) 顺序 结 (b) 循环 结 


Н ША 


具 代 表 性 的 通路 是 对 穷 举 测试 唯一 可 行 的 代替 方法 。 


人 逻辑 覆盖 测试 是 针对 程序 的 内 部 逻辑 结构 设计 测试 用 例 , 通 过 运行 测试 用 例 达 到 由 
辑 材 盖 目 的 。 逻 辑 覆 盖 测 试 是 最 传统 最 经 典 的 白 盒 测试 技术 ,要 求 测 试 人 员 对 程序 的 逻 


辑 结构 非常 清楚 。 


六 种 覆盖 标准 为 语句 覆盖 判定 覆盖 条 件 覆 盖 、 判 定 /条 件 覆 盖 、 条 件 组 合 覆 盖 和 路 
径 覆 盖 其 发 现 错误 的 能 力 呈 由 弱 至 强 的 变化 。 语 句 覆盖 每 条 语句 至 少 执行 一 次 。 判 定 覆 
盖 每 个 判定 的 每 个 分 支 至 少 执行 一 次 。 条 件 覆 盖 每 个 判定 的 每 个 条 件 应 取 到 各 种 可 能 的 
值 。 判 定 /条 件 覆盖 同时 满足 判定 覆盖 和 条 件 覆 盖 。 条 件 组 合 覆 盖 每 个 判定 中 各 条 件 的 


每 一 种 组 合 至 少 出 现 一 次 。 路 径 覆 盖 使 程序 中 每 
一 条 可 能 的 路 径 至 少 执行 一 次 。 

Мі 下 面 是 一 个 小 程序 段 ,程序 流程 图 如 
图 4-6 所 示 。 B 
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1, 


if (a>1) and (b=0) 
then c=c/a 

endif 

if (а-2) or (с> 1) 
then c=c+1 

endif 


с-Бғс 


语句 覆盖 


语句 覆盖 (Statement Coverage, SC) 的 含义 


(с) 分 支 结构 
图 4-5 常见 的 控制 流 图 


A 


F (а>1) and (b=0) T 


с=с+1 


图 4-6 程序 流程 图 


Баян 


是 : 选择 足够 多 的 测试 用 例 ,使 被 测 程序 中 每 条 语句 至 少 执行 一 次 。 语 句 覆 盖 是 很 弱 的 
逻辑 覆盖 。 为 了 暴露 程序 中 的 错误 ,程序 中 的 每 条 语句 至 少 应 该 执行 一 次 。 语 句 覆 盖 以 
程序 中 每 条 可 执行 语句 是 否 都 执行 到 为 测试 终止 的 标准 。 

满足 语句 覆盖 的 情况 : 执行 路 径 ACE. 

选择 测试 用 例 : (2,0,5)。 

语句 覆盖 的 优点 ， 

很 直观 地 从 代码 中 得 到 测试 用 例 ,无 须 细 分 每 条 判定 表达 式 。 

语句 覆盖 的 缺点 : 

对 于 隐藏 的 条 件 和 可 能 到 达 的 隐 式 分 支 是 无 法 测试 的 。 它 只 在 乎 运行 一 次 ,而 不 考 
虑 其 他 情况 。 可 以 说 语句 覆盖 是 最 弱 的 多 辑 覆 盖 准 则 。 

语句 覆盖 率 : 

си 


(4-2) 


2. 判定 覆盖 


判定 覆盖 (Decision Coverage, ОС): 执行 足够 多 的 测试 用 例 , 使 得 程序 中 每 个 判定 至 
少 都 获得 一 次 “ 真 ” 值 和 “ 假 " 值 。 

材 盖 情况 : 应 执行 路 径 ACEAABD 或 ABEAACD。 

选择 测试 用 例 (选择 其 一 ): 

(1) (2,0,3) 执行 路 径 ACE、(1,0,1) 执行 路 径 АВР. 

(2) (2,1,1) 执行 路 径 ABE、(3,0,3) 执行 路 径 ACD. 

分 支 覆盖 测试 的 优点 : 

分 支 覆盖 是 比 语句 覆盖 更 强 的 测试 能 力 , 比 语句 覆盖 要 多 几乎 一 倍 的 测试 路 径 。 它 
无 须 细 分 每 个 判定 就 可 以 得 到 测试 用 例 。 

分 支 覆盖 测试 的 缺点 : 

往往 大 部 分 的 判定 语句 是 由 多 个 逻辑 条 件 组 合 而 成 , 若 仅仅 判断 其 最 终结 果 ,而 忽略 
每 个 条 件 的 取 值 必然 会 遗漏 部 分 的 测试 路 径 。 未 深入 测试 复合 判定 表达 式 的 细节 , 仍 存 
在 测试 漏洞 。 

判定 覆盖 率 : 


判定 结果 被 评价 的 次 数 
МЕШ ARAM 


(4-3) 


3. 条 件 覆 盖 


条 件 覆盖 (Condition Соуегаре, СС): 执行 足够 多 的 测试 用 例 , 使 得 判定 中 的 每 个 条 
件 获 得 各 种 可 能 的 结果 。 

应 满足 以 下 覆盖 情况 : 

判定 一 а>1.а<1.һ--0.һ-0, 

判定 二 а--2.ау<2.с>>1,с5<<1, 


93 


《软件 测试 技术 教程 》 


选择 用 例 ( 选 择 其 一 ) : 

(1) (2,0,3041(1,1.10, 

(2) (1.0,309Ж (2,1,1). 

条 件 覆盖 测试 的 优点 : 

条 件 覆 盖 比 分 支 覆 盖 增 加 了 对 符合 判定 情况 的 测试 ,增加 了 测试 的 路 径 。 

条 件 覆 盖 测 试 的 缺点 : 

设计 若干 测试 用 例 ,执行 被 测 程序 以 后 ,要 使 每 个 判断 中 每 个 条 件 的 可 能 取 值 至 少 满 
足 一 次 ;但 覆盖 了 条 件 的 测试 用 例 不 一 定 覆 盖 了 判定 。 如 (1,0,3) 和 (2,1,1) 满 足 条 件 覆 
盖 , 但 不 满足 判断 覆盖 。 

RAME: 


_ 条件 操作 数值 至 少 被 评价 一 次 的 数量 
ЖӘНЕН Ж 条 件 操作 数值 的 总 至 


(4-4) 


4. 判定 /条 件 覆盖 


判定 /条 件 覆 六 (Decision/Condition Coverage, О/СС): 执行 足够 多 的 测试 用 例 , 使 
得 判定 中 每 个 条 件 取 到 各 种 可 能 的 值 ,并 使 每 个 判定 取 到 各 种 可 能 的 结果 。 

应 满足 以 下 覆盖 情况 : 

条 件 а>1,а<1.Ь--0.Ь>0, 

а=2,а522,с2>1,с<1, 

应 执行 路 径 : АСЕЛ АВР 2 ACDA АВЕ. 

选择 测试 用 例 : (2,0,3) 执行 路 径 ACE 或 (1.1,1) 执 行路 径 ABD。 

判定 /条 件 覆 盖 测 试 的 优点 : 

判定 /条 件 覆 盖 测 试 即 满足 判定 覆盖 准则 又 满足 条 件 覆盖 准则 ,弥补 了 二 者 的 不 足 。 

判定 /条 件 覆 盖 测 试 的 缺点 : 

判定 /条 件 覆 盖 未 满足 条 件 组 合 覆 盖 , 又 忽略 了 路 径 覆 盖 的 问题 。 判 定 /条 件 覆盖 没 
有 考虑 单个 判定 对 整体 结果 的 影响 ,无 法 发 现 程序 中 的 逻辑 错误 。 


判定 /条 件 覆 盖 率 ， 
Е 条 件 操作 数值 或 判定 结果 值 至 少 被 评价 一 次 的 数量 
判定 /条 件 覆盖 率 条 件 操作 数 全 总 数 二 判定 结果 总 致 
5. 条 件 组 合 覆 盖 


条 件 组 合 覆 盖 (Condition Combination Coverage, CCC): 执行 足够 多 的 例子 ,使 每 个 
判定 中 条 件 的 各 种 可 能 组 合 都 至 少 出 现 一 次 。 

满足 以 下 覆盖 情况 : 

Ф a>1,b=0 © а>1,һэ<0 

Ф a<1.b=0 Ф a<1,b*#0 

© a=2,c>1 (Өа-2.с<1 

Ф az2,c>1 a 天 2,c 委 1 
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选择 测试 用 例 : 

(2,0,3) ЕО © 

(2,1,1) 覆盖 @ © 

(1,0,3) 覆盖 @ Ф 

(1,1,1) 覆盖 @ 

条 件 组 合 覆盖 测试 的 优点 : 

条 件 组 合 覆 盖 使 得 每 个 判定 中 条 件 的 各 种 可 能 组 合 都 至 少 出 现 一 次 。 
条 件 组 合 覆盖 测试 的 缺点 : 

条 件 组 合 覆 盖 忽 略 了 路 径 覆 盖 的 问题 。 

条 件 组 合 覆 盖 率 : 


a 条 件 操作 数值 至 少 被 评价 一 次 的 数量 
条 件 组 合 覆 盖 率 一 系 件 操作 数值 的 所 有 组 合 总 数 


(4-6) 


6. 路 径 覆 盖 


路 径 覆 盖 (Path Coverage, PC): 执行 足够 多 的 例子 ,覆盖 程序 中 所 有 可 能 的 路 径 ,如 
表 4-2 所 示 。 


表 4-2 路 径 覆盖 表 
А в х 覆盖 路 径 пе Жж 
2 0 3 АС Е D00 
1 0 1 A B D Ф® 
2 1 1 АВЕ DAO 
3 0 1 ACE OO@ 


一 条 独立 路 径 是 指 , 和 其 他 独立 路 径 相 比 ,至 少 引 入 一 个 新 处 理 语 句 或 一 个 新 判断 的 
程序 通路 。 

路 径 覆 盖 测 试 的 优点 : 

路 径 覆 盖 是 经 常 要 用 到 的 测试 覆盖 方法 , 它 比 普通 的 判定 覆盖 准则 和 条 件 覆盖 准则 
覆盖 率 都 要 高 。 

路 径 覆 盖 测 试 的 缺点 : 

路 径 覆 盖 不 一 定 能 保证 条 件 的 所 有 组 合 都 覆盖 。 由 于 路 径 覆 盖 需 要 对 所 有 可 能 的 路 
径 进 行 测试 (包括 循环 .条 件 组 合 、 分 支 选 择 等 ) ,那么 需要 设计 大 量 、 复 杂 的 测试 用 例 ,使 
得 工作 量 呈 指数 级 增长 。 

对 于 比较 简单 的 小 程序 ,实现 路 径 覆 盖 是 可 能 做 到 的 。 但 是 如 果 程 序 中 出 现 较 多 的 
判断 和 循环 ,可 能 的 路 径 数目 将 急剧 增长 ,要 在 测试 中 覆盖 所 有 路 径 是 无 法 实现 的 。 为 了 
解决 这 个 难题 ,只 有 把 覆盖 路 径 压缩 到 一 定 的 限度 内 ,如 程序 中 的 循环 体 只 执行 一 次 。 在 
实际 测试 中 ,即使 对 于 数目 很 有 限 的 程序 已 经 做 到 路 径 覆盖 ,仍然 不 能 保证 被 测 程序 的 正 
确 性 ,还 需要 采取 其 他 测试 方法 进行 补充 。 
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例 2 下 面 是 一 段 简单 的 C 语言 程序 ,程序 流 ja 
程 图 如 图 4-7 所 示 。 


Е ED апа (y=0) Т 
If (х>166 у-1) then В а 


1 
2 2-2%2; ! 
3 If (х=3 I| 2>1) then re 
4 у++; 
С) 按照 “语句 覆盖 ”选择 确定 测试 用 例 及 执 。 ， 
行路 径 。 5 > А 
(2) 按照 “判定 覆盖 "选择 确定 测试 用 例 及 执 ! 
行路 径 。 
(3) 按照 “条 件 材 盖 " 选 择 确定 测试 用 例 、 执 行 | 
路 径 和 条 件 取 值 。 
(4) 按照 “判定 /条 件 覆 盖 ” 选 择 确定 测试 用 Шет 程序 流程 图 


例 \ 执 行路 径 和 条 件 取 值 。 
(5) 按照 “条 件 组 合 覆 盖 ” 选 择 确 定 测试 用 例 、 执 行路 径 、 条 件 取 值 和 覆盖 组 合 。 
(6) 按照 “路 径 覆 盖 ?选择 确定 测试 用 例 及 执行 路 径 。 
假设 : 
X 二 1 取 真 值 , 记 为 Т1; ХІ 取 真 值 , 记 为 一 T1。 
Y=1 取 真 值 , 记 为 T2;Y 关 1 取 真 值 , 记 为 一 T2。 
X=3 取 真 值 , 记 为 T3;X 天 3 取 真 值 , 记 为 一 T3。 
Z>1 取 真 值 , 记 为 T4;Z<1 取 真 值 , 记 为 一 T4。 
语句 覆盖 ,判定 覆盖 和 路 径 覆 盖 如 表 4-3 所 示 。 
жаз 语句 覆盖 .判定 覆盖 和 路 径 覆 盖 


覆盖 准则 测试 用 例 执行 路 径 ( 语 句 ) 
语句 覆盖 x 一 3,y 一 1,z 一 2 1,2,3,4 
2 х=3,у=1,2=2 1,2,3,4 
ы х=1,у=1,2=1 1.3 
х=3,у=1,2=2 ЕЛЕР 
зе х=3,у=0,2=1 1.3.4 
пена х=2,у=1,2=1 1,22 
х=1.у=1,2=1 1,3,4 


条 件 覆 盖 、 判 定 /条件 覆盖 和 条 件 组 合 覆 盖 如 表 4-4 所 示 。 
Жаа 条 件 覆盖 ,判定 /条 件 覆盖 和 条 件 组 合 覆盖 


覆盖 准则 测试 用 例 条 件 取 值 执行 路 径 ( 语 句 ) 
х 一 0,z 一 1 Т1,-1Т2,Т3,-Т4 1,3,4 
таш х 一 1,z 一 一 T1,T2, 一 T3,T4 1,3,4 
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续 表 
覆盖 准则 测试 用 例 条 件 取 值 执行 路 径 (语句 ) 
тууы Т1,Т2.Т3.Т4 1.25304 
ұс 
判断 /条 件 覆盖 | =1,у=0,2= | -Ті,-Т2,-Т3,-Т4 1,3 
х=3,у=1,2=2 Т1,Т2.Т3,Т4 1,3,4 
х=3,у=0,2=1 T1, 一 T2,T3, 一 T4 1,3,4 
ИЕ 4 
Жаа х=1,у=1,2=2 一 T1,T2, 一 T3,T4 1,3,4 
х=1,у=0,2=1 一 T1, 一 T2, 一 T3, 一 T4 13 


4.3 白 盒 静态 测试 


白 盒 静态 测试 就 是 用 人 工 的 方法 检查 程序 ,主要 有 桌 前 检查 .代码 审查 .代码 走 查 、 代 
码 评审 和 同行 评审 、 基 于 缺陷 模式 的 测试 等 。 


43.1 桌 前 检查 


桌 前 检查 (Desk Check) 是 程序 员 检 查 自己 的 程序 ,主要 检查 变量 .常量 .风格 等 ,补充 
桌 前 检查 文档 。 桌 前 检查 一 般 是 程序 员 实现 制定 功能 后 ,进行 单元 测试 之 前 ,对 源 代 码 进 
行 的 初步 检查 。 

桌 前 检查 的 重点 为 : 编码 规范 .语句 的 使 用 等 是 否 符合 编码 规范 ,并 根据 (编码 规范 》 
调整 自己 的 代码 以 符合 编码 规范 的 要 求 。 桌 前 检查 的 参与 人 员 是 软件 开发 人 员 。 

桌 前 检查 具体 检查 内 容 包括 : 

。 检查 变量 的 交叉 引用 表 ; 

。 检查 子 程序 `. 安 和 函数 ; 

。， 检查 等 价 类 表 ; 

。 检查 常量 表 ; 

。 检查 设计 标准 ; 

。 检查 控制 流 ; 

。 检查 程序 设计 风格 ; 

。 检查 程序 的 规格 说 明 。 


4.3.2 代码 审查 


代码 审查 (Code Review) 的 目的 就 是 为 了 产生 合格 的 代码 ,检查 源 程序 编码 是 否 符合 
详细 设计 的 编码 规定 ,确保 编码 与 设计 的 一 致 性 。 代 码 审查 一 般 由 程序 设计 人 员 和 测试 
人 员 组 成 审查 小 组 。 

代码 审查 的 内 容 如 下 : 
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(1) 代码 规范 性 的 审查 。 

代码 规范 性 的 审查 有 助 于 更 早 地 发 现 缺 陷 , 提 高 代码 质量 ,而 且 可 以 帮助 程序 员 遵 守 
规则 、 养 成 好 的 习惯 ,以 达到 预防 缺陷 的 目的 。 

(2) 代码 风格 和 编程 规则 的 审查 。 

代码 风格 和 编程 规则 两 者 不 可 缺 一 ,都 应 列 入 代码 评审 的 范围 里 。 

(3) 对 命名 规则 、 缩 进 与 对 齐 .注释 和 函数 处 理 等 的 审查 。 

(4) 业务 逻辑 的 审查 和 算法 的 效率 。 

(5) 代码 审查 还 要 检查 代码 和 设计 的 一 致 性 。 

(6) 代码 对 标准 的 遵循 和 可 读 性 。 

(7) 代码 的 逻辑 表达 的 正确 性 。 

(8) 代码 结构 的 合理 性 等 方面 。 

代码 审查 可 以 确保 代码 编程 标准 有 效 地 执行 ,提高 代码 质量 ,减轻 动态 测试 负担 , 提 
高 代码 可 重复 使 用 ,降低 项 目 风险 与 经 费 增 加 程序 的 可 理解 性 ,降低 维护 成 本 。 代 码 审查 
是 静态 测试 的 一 种 ,而 静态 测试 则 是 为 动态 测试 做 准备 。 代 码 审查 可 以 发 现 违背 程序 编 
写 标准 的 问题 ;程序 中 不 安全 ,不 明确 和 模糊 的 部 分 ; 找 出 程序 中 不 可 移植 部 分 违背 程序 
编程 风格 的 问题 ,包括 变量 检查 \ 命 名 和 类 型 审查 ,程序 逻辑 审查 ,程序 语法 检查 和 程序 结 
构 检 查 等 内 容 。 


4.3.3 代码 走 查 


代码 走 查 (Walkthrough) 由 测试 小 组 组 织 或 者 专门 的 代码 走 查 小 组 进行 代码 走 查 ， 
这 时 需要 开发 人 员 提 交 有 关 的 资料 文档 和 源 代码 给 走 查 人 员 ,并 进行 必要 的 讲解 。 测 试 
小 组 会 前 发 材料 ,小 组 成 员 集 体 扮 演 计算 机 的 角色 ,让 测试 用 例 沿 程 序 的 逻辑 运行 一 遍 ， 
记录 轨迹 , 供 分析 讨 论 。 代 码 走 查 的 参与 人 员 为 测试 人 员 ,一 般 程序 员 不 参与 。 

代码 走 查 往往 根据 代码 审查 单 来 进行 ,代码 审查 单 常常 是 根据 编码 规范 总 结 出 来 的 
一 些 条 目 ,目的 是 检查 代码 是 否 按照 编码 规范 来 编写 的 。 当 然 , 代 码 走 查 的 最 终 目的 还 是 
为 了 发 现代 码 中 潜在 的 错误 和 缺陷 。 

代码 走 查 的 重点 如 下 : 

(1) 把 材料 (需求 描述 文档 ,程序 设计 文档 ,程序 的 源 代码 清单 、 代 码 编码 标准 、 代 码 
缺陷 检查 表 等 ) 发 给 走 查 小 组 每 个 成 员 , 让 他 们 认真 研究 程序 。 

(2) 召开 会 议 ,让 与 会 者 “充当 ”计算 机 ,让 测试 用 例 沿 程序 的 逻辑 运行 一 遍 , 随 时 记 
录 程 序 的 踪迹 , 供 分析 和 讨论 ,发现 更 多 的 问题 。 

实践 表明 ,代码 审查 是 发 现 错误 缺陷 最 有 效 的 手段 之 一 ,人 工 走 查 平均 能 查 出 被 测 程 
序 的 30% 一 70% 的 逻辑 设计 和 编码 缺陷 ,以 IBM 为 例 ,其 代码 审查 会 的 查 错 效 率 高 
达 80%。 
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4.3.4 代码 评审 和 同行 评审 


1. 代码 评审 


代码 评审 是 在 编码 初期 或 编写 过 程 中 采用 一 种 有 同行 参与 的 评审 活动 。 代 码 评审 通 
过 大 家 共同 阅读 代码 或 由 程序 编写 者 讲解 代码 ,其 他 同行 边 听 边 分 析 问 题 的 方法 。 

代码 评审 的 重点 : 通过 组 织 或 其 他 程序 员 共同 查看 程序 ,可 以 找 出 问题 ,使 大 家 的 代 
码 风格 一 致 或 遵守 编码 规范 。 

代码 评审 的 参与 人 员 为 全 体 开发 小 组 。 


2. 同行 评审 


同行 评审 是 引用 CMM( 能 力 成 熟 度 模 型 ) 中 的 术语 ,如 用 在 评审 源 代码 上 ,就 是 代码 
评审 ;在 同行 评审 中 ,由 软件 工作 产品 创建 者 的 同行 们 检查 该 工作 的 产品 ,识别 产品 的 缺 
陷 , 改 进 产品 的 不 足 。 

同行 评审 的 目的 : 

(1) 检验 工作 产品 是 否 正确 地 满足 了 以 往 的 工作 产品 中 建立 的 规范 ,如 需求 或 设计 
文档 。 

(2) 识别 工作 产品 相对 于 标准 的 偏差 ,包括 可 能 影响 软件 可 维护 性 的 问题 。 

(3) 向 创建 者 提出 改进 建议 。 

(4) 促进 参与 者 之 间 的 技术 交流 和 学 习 。 

同行 评审 的 参与 人 员 包 括 程序 员 、` 设 计 师 .单元 测试 工程 师 、 维 护 者 、 需 求 分 析 师 、 编 
码 标准 专家 (此 为 CMM 标准 中 提出 的 参与 角色 ,可 根据 实际 情况 调整 ,至少 需 要 开发 人 
员 测试 人 员 、 设 计 师 参与 ) 。 


3. 注意 事项 


(1) 协调 人 负责 保证 会 的 讨论 高 效 进行 ,每 个 参与 者 都 将 注意 力 集中 在 查找 缺陷 而 
不 是 修正 缺陷 。 

(2) 会 后 要 确保 缺陷 得 到 修正 。 

СЗ) 对 错误 清单 要 分 析 、 归 纳 , 用 以 提炼 缺陷 列表 。 

(4) 会 议 时间 在 一 个 半 小 时 到 两 个 小 时 。 

G) 每 小 时 大 约 阅 读 150 行 代码 ,不 要 过 于 求 多 求 快 。 

4. 作用 

(1) 发 现 缺陷 。 

(2) 程序 员 会 在 编程 风格 .算法 选择 及 编程 技术 等 方面 得 到 反馈 。 

(3) 其 他 参与 者 通过 他 人 的 错误 、 风 格 等 受益 。 

(4) 能 够 尽早 地 发 现代 码 中 容易 出 错 的 部 分 ,为 后 面 的 测试 找到 重点 测试 的 地 方 。 
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4.3.5 基于 缺陷 模式 测试 


缺陷 模式 是 程序 中 经 常 发 生 的 错误 或 缺陷 所 呈现 的 语法 及 语义 特征 。 通 常 由 具有 程 
序 设 计 经 验 的 程序 员 或 者 测试 人 员 总 结 出 来 。 不 同 的 编程 语言 ,往往 对 应 于 不 同 的 缺陷 
模式 集 。 

基于 缺陷 模式 测试 技术 具有 如 下 特点 。 

(1) 针对 性 强 : 如 果 说 某 种 模式 的 缺陷 是 经 常 发 生 的 ,并 且 在 被 测 软件 中 是 存在 的 ， 
则 面向 缺陷 的 测试 可 以 检测 出 此 类 缺陷 。 

(2) 基于 缺陷 模式 的 软件 测试 技术 往往 能 发 现 其 他 测试 技术 难以 发 现 的 故障 ,如 小 
概率 .不 明显 、 误 操作 。 

(3) 工具 自动 化 程度 高 以 及 测试 效率 高 。 

(4) 缺陷 定位 准确 ,对 测试 所 发 现 的 缺陷 能 够 准确 定位 。 

以 缺陷 产生 后 果 的 严重 性 高 低 为 评判 标准 ,从 程序 的 源 代 码 形 式 着 眼 ,对 缺陷 模式 进 
行 分 类 为 故障 模式 安全 漏洞 模式 、 疑 问 代码 模式 和 规则 模式 。 


1. 故障 模式 


常见 的 故障 模式 如 下 所 示 : 

。 存储 器 泄露 模式 。 

。 数组 越界 模式 。 

。 使 用 未 初始 化 变量 模式 。 

。 空 指针 使 用 故障 模式 。 

。 死 循环 结构 模式 。 

。 非法 计算 模式 。 

1) 存储 泄露 的 故障 模式 

设 在 程序 的 某 处 申请 了 大 小 为 M 的 空间 , 凡 在 程序 结束 时 М 或 者 M 的 一 部 分 没 被 
释放 、 或 者 多 次 释放 М 或 M 的 一 部 分 都 是 内 存 泄露 故障 。 

MLF 有 以 下 三 种 形式 。 

(1) 遗漏 故障 : 指 申请 的 内 存 没 有 被 释放 。 

(2) 不 匹配 故障 : 指 申请 函数 和 释放 函数 不 匹配 。 

(3) 不 相等 的 释放 错误 : 指 释放 的 空间 和 申请 的 空间 大 小 不 一 样 。 

例如 : 


void f (int а) { 
int % memleak error; 


if(a>0) return; 


$ 
2 
3 memleak еггог= (int ж )malloc (sizeof (int) * 100); 
4 
5 free (memleak error); 

6 


} 
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分 析 : 在 第 4 行 处 报告 一 个 错误 ,函数 返回 前 没有 释放 。 
例如 : 申请 函数 和 释放 函数 不 匹配 。 


str=malloc (10); >"; delete (str); malloc 与 free 匹配 
str=new(10) ;…; free (str); new 与 delete 匹 配 


2) 数组 越界 故障 模式 

设 某 数组 定义 为 Array[min maxj], 若 引用 Аггау[1) H. і< тіп 或 і>тах 都 是 数组 越 
界 故障 。 在 C++ 中 , 若 10 ж Smax 是 数组 越界 故障 。 字 符 串 拷贝 过 程 中 可 能 存在 的 
数组 越界 故障 。 

对 程序 中 任何 出 现 Array[ i 的 地 方 ,都 要 判断 i 的 范围 : 

若 i 是 在 数组 定义 的 范围 内 , 则 是 正确 的 ; 

若 i 是 在 数组 定义 的 范围 外 , 则 是 数组 越界 故障 模式 。 

例如 : 


1 int даба [10]; 
起 for(i=0; i<=10; i++){data[i]=*…}; 


分 析 : 在 第 2 行 处 报告 一 个 错误 ,故障 类 型 是 数组 越界 。 


例如 : 

1 int i; 

2 int а[4]= {1,2,3,4}; 
3 if (i> 2) 

4 { 

5 a[i]=1; 

6 } 

7 return 0; 


分 析 : 在 第 5 行 处 报告 一 个 错误 ,故障 类 型 是 数组 越界 。 条 件 判断 中 的 1 有 可 能 大 于 
,会 导致 数组 越界 。 
3) 使 用 未 初始 化 变量 故障 模式 
使 用 未 初始 化 变量 故障 模式 : 存在 一 个 路 径 , 在 该 路 径 上 使 用 前 面 没 有 被 赋 初 值 的 
变量 是 使 用 未 初始 化 变量 故障 。 
例如 : 


1 
2 
3 int y; 
4 
5 


分 析 : 在 第 5 行 处 报告 一 个 错误 ,故障 类 型 是 变量 x 没有 进行 初始 化 便 进行 了 使 用 。 
4) 空 指针 使 用 故障 模式 
空 指针 使 用 故障 , 即 引 用 空 指针 或 给 空 指针 赋值 的 都 是 空 指针 使 用 故障 。 
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例如 

t class ff{ 

2 void f (int * p,int ж а)( 
3 if (q!= (void * )0){ 
4 return; 

5 } 

6 if (p==q){ 

T int b; 

8 } 

9 int а= ер; 

10 } 

11 yi 


分 析 : 在 第 9 行 处 报告 一 个 错误 ,故障 类 型 是 如 果 q 不 为 空 则 返回 ,为 空 则 因为 存在 
计 (p 王 一 qd) 的 判断 ,所 以 下 面 直接 对 p 的 解 引 用 则 是 不 确切 的 。 

5) 死 循环 结构 模式 

在 控制 流 图 中 ,对 任何 一 个 循环 结构 ,包括 : 

e for 语句 中 的 死 循环 结构 ; 

。 while 语句 中 的 死 循环 结构 ; 

e do-while 语句 中 的 死 循环 结构 ; 

。 goto 语句 中 的 死 循环 结构 。 

例如 ,没有 结束 条 件 。 


for(i=1;i++) 
例如 , 增 量变 化 不 能 使 程序 结束 。 
Ғог(і=1;1==100;1=1+2) 
例如 ,无 增 量 或 增 量 与 结束 无 关 。 
for(i=1; i<=100; j++) 


6) 非法 计算 故障 模式 

非法 计算 故障 是 指 计算 机 不 允许 的 计算 。 一 旦 非法 计算 类 故障 产生 ,系统 将 强行 退 
出 。 例 如 ,除数 为 0 故障 、 对 数 自 变量 为 0 或 负数 故障 、 根 号 内 为 负数 的 故障 等 。 

例如 : 


int Ғапс() 

1 
int а-0, b=10; 
b /=a; 
return 0; 


} 
分 析 : 在 第 4 行 处 报告 一 个 错误 ,故障 类 型 是 其 中 a 为 0, 所 以 引起 故障 。 
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2. 安全 漏洞 模式 


安全 漏洞 缺陷 会 给 系统 留 下 安全 隐患 ,为 攻击 该 系统 打开 方便 之 门 。 安 全 漏洞 模式 
有 未 验证 输入 、 缓 冲 区 溢出 、 安 全 功能 .竞争 条 件 、 风 险 操作 等 。 

1) 未 验证 输入 

未 验证 输入 : 程序 从 外 部 获取 数据 时 ,这 些 数据 可 能 含有 具有 欺骗 性 或 者 是 不 想 要 
的 垃圾 数据 ,如 果 在 使 用 这 些 数据 前 不 进行 合法 性 检查 则 将 威胁 到 程序 的 安全 。 

未 验证 输入 可 能 会 导致 程序 不 按 原 计 划 执 行 ,也 有 可 能 直接 或 间接 地 导致 缓冲 区 洲 
出 缺陷 。 主 要 类 型 有 使 用 的 数据 来 自 外 部 的 全 局 变量 和 使 用 的 数据 来 自 输入 函数 。 

例如 ,使 用 的 数据 来 自 外 部 的 全 局 变量 。 


1 Main (int argc, char *argv[]) 
2 ( 

3 short lasterror; 

4 char argvbuffer[16]; 
5 if (argc==2) 

6 {strcpy (argvbuffer, argv[1]);} 
7 } 


分 析 : 由 于 程序 第 6 行 中 使 用 的 外 部 输入 变量 argv[1] 作 为 strcpy 的 参数 之 前 并 没 
有 进行 相应 的 合法 性 检查 ,因此 存在 一 个 被 污染 的 数据 缺陷 。 

2) 缓冲 区 溢出 

当 程序 要 在 一 个 缓冲 区 内 存储 比 该 缓冲 区 的 大 小 还 要 多 的 数据 时 , 即 会 产生 缓冲 区 
溢出 漏洞 。 主 要 类 型 包括 数据 拷贝 造成 的 缓冲 区 溢出 、 格 式 化 字符 串 造 成 的 缓冲 区 溢出 。 

例如 : 


1 #include< stdlib.h> 

2 #include< string.h> 

3 #inclugde< stdio.h> 

4 #define BUFSIZE 2 

5 int main(int argc, char **агду) { 
6 char * buf; 

7 buf= (char % )malloc (BUFSIZE); 

8 if (buf==NULL) 

9 {printf ("Memory allocation problem"); return 1;} 
10 strcpy (buf, argv[1]); 

11 printf ("%d\n", argc); 

12 printf("%s", buf); 

13 free (buf); 

14 return 0; 


15 } 


分 析 : 代码 第 10 行 由 于 未 验证 字符 串 argv[1] 的 长 度 ,而 直接 将 其 拷贝 到 buf, 这 可 
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能 导致 堆 缓冲 区 溢出 。 

3) 风险 操作 

如 果 不 恰当 地 使 用 了 某 些 标准 库 函 数 , 可 能 会 带 来 安全 隐患 。 其 至 在 某 些 情况 下 , 某 
些 函 数 一 经 被 使 用 , 就 可 能 带 来 安全 隐患 。 

例如 ,rand() 和 random() 这 样 的 随机 数 生 成 函数 ,它们 在 生成 伪 随 机 值 的 时 候 表现 
出 来 的 性 能 是 非常 差 的 , 如 果 用 它们 来 生成 默认 的 口令 , 这 些 口 令 将 很 容易 被 攻击 者 猜 
WEJ. 


void func () { 


1 

2 

3 long зеей- random()+ datetime (); 
4 mdsetseed (seed) ; 
5 

6 


} 
分 析 : 因为 seed 这 个 随机 数 将 用 于 一 个 与 密码 相关 的 进程 ,会 造成 一 个 安全 漏洞 。 


4) 安全 功能 

软件 安全 性 是 人 们 更 为 关注 的 。 

例如 : 

1 #include< sqlext.h> 

2 #include< Windows .h> 

3 int fl(void * handle, SQLCHAR % serverName, int nameLenl) ( 

4 char* pwd=“pwd”; 

5 SQLConnect (handle, serverName, nameLen1, (SQLCHAR ж )user, 4, (міп)риа, 3); 
6 return 0; 

了 } 


分 析 : 代码 第 5 行使 用 SQLConnect 连接 数据 库 ,第 6 个 参数 使 用 рма 为 明文 密码 。 


例如 : 

1 #include< sqlext.h> 

2 #include<Windows.h> 

Е. int #1 (5С handle, SR % ѕегуегМапе, ST nameLen1l) { 

4 SQLConnect (handle, зегуетМаше, папеГепі, (58% )"иѕег", 4, (58% )"рѕа", 3); 
5 return 0; 

6 } 


分 析 : 代码 第 6 行 ,密码 是 一 个 固定 的 字符 串 ,造成 硬 编码 密码 问题 。 

D 竞争 条 件 

如 果 程 序 中 有 两 种 不 同 的 1/O 调用 同一 文件 进行 操作 ,而 且 这 两 种 调用 是 通过 绝对 
路 径 或 相对 路 径 引用 文件 的 ,那么 就 容易 出 现 竞争 条 件 问 题 。 在 两 种 操作 进行 的 间隙 , 黑 
客 可 能 改变 文件 系统 ,那么 将 会 导致 对 两 个 不 同 的 文件 操作 而 不 是 同一 文件 进行 操作 。 
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竞争 条 件 问题 发 生 在 用 户 拥有 不 同 的 权限 运行 的 程序 中 ,例如 ,程序 ,数据库 和 服务 
器 程序 等 。 当 两 个 操作 在 同一 个 函数 中 ,并且 用 的 是 同一 个 路 径 ,就 会 产生 竞争 条 件 。 
例如 ,access() 和 remove() 之 间 的 竞争 条 件 。 


E Void remove if possible (char * filename) 
2 1 

3 if ((access (filename, 0) ) 

4 remove (filename) ; 

5 } 


з. 疑问 代码 模式 


此 类 问题 未 必 会 造成 系统 的 错误 ,可 能 是 误 操 作 造 成 的 ,或 者 是 由 工程 师 不 熟悉 开发 
程序 造成 的 ,起 到 提示 作用 。 

疑问 代码 模式 主要 有 : 

。 争议 代码 ; 

。， 低 性 能 代码 ; 

。 元 余 代码 。 

1) 争议 代码 

争议 代码 包括 : 

。 数据 类 型 转换 错误 ”不 同 数据 类 型 之 间 的 隐 式 转换 可 能 会 使 数据 发 生 错误 。 

。 条 件 判 断 、 开 关 语 句 的 分 支 是 相同 的 代码 ,在 条 件 判 断 和 开关 语句 的 分 支 中 ,使 用 
了 相同 的 代码 ,这 是 一 种 病态 的 控制 流 。 

。 不 合适 的 比较 , 浮 点 数 的 错误 比较 (两 个 浮 点 数 的 相等 ,因为 浮 点 数 的 计算 涉及 精 
确 性 方面 ( 舍 入 等 ), 所 以 比较 两 个 浮 点 数 的 相等 性 是 不 准确 的 ); 疑 问 的 条 件 语 
句 : 缺陷 名 称 : 二 = 与 = 运算 符 的 混淆 。 


例如 ,数据 类 型 转换 错误 。 
t void foo (int а) { 

2 char b; 

3 b=a; 

4 } 


分 析 : int 到 char 的 转换 可 能 导致 数据 的 丢失 。 


例如 : 

1 public void setValue (int х) { 

2 String у=" "; 

3 1Ғ(х<-0)1 

4 System.out .ргіпё1п ("The result іѕ:"+у) 
5 } 

6 е1ѕе{ 

7 System.out .Println ("Тһе result іѕ:"+у) 
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上 述 程序 的 4、7 行 ,证 语句 两 个 分 支 用 了 两 个 相同 的 代码 。 

2) 低 性 能 代码 

低 性 能 代码 会 导致 软件 运行 效率 低下 ,因此 建议 采用 更 高 效 的 代码 来 完成 同样 的 功 
能 。 主 要 包括 使 用 低 效 函数 /代码 ,使 用 多 余 函 数 、Java 中 显 式 垃圾 回收 .元 余 代 码头 文 
件 中 定义 的 静态 变量 ,不 必要 的 文件 包含 .字符 串 低 效 操作 和 有 更 简单 的 运算 可 以 替 
代 等 。 

一 般 情况 下 ,如 果 循 环 条 件 中 有 一 个 函数 调用 ,而 它 的 返回 值 是 不 会 在 循环 条 件 中 改 
变 的 ,一 定 要 把 它 拿 到 循环 外 面 来 。 

例如 ,循环 条 件 中 隐藏 的 低 效 操作 。 


for (і-0; i<strlen(str); i++); 


分 析 : 一 般 情况 下 ,如 果 循环 条 件 中 有 一 个 函数 调用 ,而 它 的 返回 值 是 不 会 在 循环 条 
件 中 改变 的 ,一 定 要 把 它 拿 到 循环 外 面 来 。 

3) TRR 

在 C/C++ 中 ,存在 从 未 使 用 过 的 方法 或 者 属性 ,或 者 存在 从 未 使 用 ( 读 取 ) 过 的 局 部 
变量 ,此 类 缺陷 为 元 余 代码 缺陷 。 

例如 : 


1 classA 
21 

3 void Ёоо (іп с) 
a 

5 inti; 
6 for(…){ 
7 і-с; 

8 break; 

9 } 

10 } 


分 析 : 变量 i 被 赋值 过 ,但 未 被 使 用 过 ,也 应 该 报错 。 
4. 规则 模式 


软件 开发 总 要 遵循 一 定 的 规则 ,公司 或 者 团队 也 有 一 些 开 发 规则 ,违反 这 些 规则 也 是 
不 允许 的 。 规 则 模式 包括 声明 定义 ,版面 书写 .分 支 控制 .指针 使 用 .运算 处 理 等 。 

D 循环 体 必须 用 大 括号 括 起 来 

基于 加 强 代 码 可 读 性 、 避 免 人 为 失误 的 目的 ,循环 体 必 须 用 大 括号 括 起 来 。 

例如 : 


#include< stdio.h> 
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int main () 
1 
int 1=1,5ш= 0; 
while (1<-100) 
{ 
Sum= sumt і; 
із; 
} 
printf ("sum= d\n", зит); 
return 0; 


} 
例如 


#include< stdio.h> 
#include<math.h> 
int main () 
{int п,К,і,ш-0; 
for (n= 101;п<= 200; п=п+ 2) 


{ к= загі (п); 


Ғог (і= 
if (п%1==0) break; 
if (i>=k+1) 
{printf ("а ",n); 
mam 1; 
} 
if (7%10== 0) printf ("\п"); 
ў 
printf ("\п"); 
return 0; 
} 


2) then/else 中 的 语句 必须 用 大 括号 括 起 来 

基于 加 强 代 码 可 读 性 、 避 免 人 为 失误 的 目的 then/else 中 的 语句 必须 用 大 括号 括 
起 来 。 

例如 : 


i<=k;i++) 


#include< stdio.h> 
int main () 
1 
float a,b,t; 
scanf ("%f, $f", &a, &b); 
if(a>b) 
$ 


t=a; 
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printf ("%5.2f,%5.2f\n",a,b); 
return 0; 


} 
例如 : 


#include< stdio.h> 
int main() 
{ 
int х,у; 
scanf ("%d", &х); 
1Ғ(х<0) 
у-- 1; 
else 
1Ғ(х--0) у-0; 
else у-1; 
printf ("x=% а, у= %0\п",х,у); 
return 0; 


} 

3) 在 switch 语句 中 必须 有 default 语句 

如 果 switch 语句 中 缺 省 了 default 语句 , 当 所 有 的 case 语句 的 表达 式 值 都 不 匹配 时 ， 
则 会 跳 转 到 整个 switch 语句 后 的 下 一 个 语句 执行 。 强 制 default 语句 的 使 用 体现 出 已 考 


虑 了 各 种 情况 的 编程 思想 。 
例如 : 
#include< stdio.h> 
int паіп() 
( 
char grade; 


scanf ("%с", &grade) ; 

printf ("Your score:"); 

switch (grade) 

1 
case "А": printf("90 一 100\n") ;break; 
case "В": printf("70 一 89\n") ;break; 
case "С": printf ("60~ 69\n") ;break; 
case 'D': printf ("< 60\n") ;break; 

default: printf ("data error! \n");break; 
} 

return 0; 


} 
禁止 switch 中 的 case 语句 不 是 由 break 终止 。 
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描述 : 如 果 某 个 case 语句 最 后 的 break 被 省 略 ,在 执行 完 该 case 语句 后 ,系统 会 继续 
执行 下 一 个 case 语句 。case 语句 不 是 由 break 终止 ,有 可 能 是 编程 者 的 粗心 大 意 , 也 有 
可 能 是 编程 者 的 特意 使 用 。 为 了 避免 编程 者 的 粗心 大 意 , 因 此 禁止 switch 的 case 语句 不 
是 由 break 终止 。 


44 ”其 他 白 盒 测试 方法 


其 他 和 白 盒 测试 方法 还 有 很 多 种 ,下 面 分 别 介绍 程序 捅 装 测试 ,程序 变异 测试 .循环 语 
句 测 试 等 。 


4.4.1 程序 插 装 测试 


在 软件 白 盒 测试 中 ,程序 插 装 技术 是 一 种 基本 的 测试 手段 ,有 着 广泛 的 应 用 。 

程序 持 装 (Program Instrumentation) 测 试 是 在 被 测 程序 中 添加 语句 ,对 程序 语句 中 
的 变量 值 进行 检查 。 程 序 持 装 测试 是 一 种 基本 的 测试 手段 ,通过 向 被 测 程序 中 插入 操作 
来 实现 测试 目的 。 程 序 员 经 常 向 程序 中 插入 打印 语句 或 加 法 记 数 语句 ,了 解 程序 执行 中 
的 动态 变化 ,插入 的 语句 称 为 探测 器 。 

程序 插 装 类 型 如 下 : 

(1) 用 于 测试 覆盖 率 和 测试 用 例 有 效 性 度量 的 程序 插 装 。 

(2) 用 于 判断 检测 的 程序 插 装 。 

D 程序 执行 到 插入 点 时 必须 满足 的 条 件 ,否则 就 会 产生 错误 。 

@ 在 进行 除法 运算 之 前 ,加 一 条 分 母 不 为 0 的 断言 语句 ,可 以 有 效 地 防止 程序 出 错 。 

程序 插 装 测试 时 关注 的 问题 如 下 : 

(1) 探测 哪些 信息 ? 

探测 哪些 信息 需要 根据 具体 情况 具体 分 析 , 不 能 一 概 而 论 。 

(2) 程序 的 什么 位 置 设置 探测 点 ? 

一 般 探 测 点 设置 在 如 下 位 置 : 

D 程序 块 的 第 一 个 可 执行 语句 之 前 。 

(©) Гог. о while .do until do 等 循环 语句 。 

@ if endif ,if else endif 等 条 件 语句 。 

а) 函数 .过 程 . 子 程序 调用 语句 之 后 。 

© 输入 或 输出 语句 。 

© return .go 语句 之 后 。 

(3) 需要 多 少 探测 点 ? 

需要 多 少 探测 点 可 以 通过 下 面 的 例子 了 解 。 


例如 : 
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ІҒх>у c(1)=c(1)+1 
x=y Ifx>y 
Else -у 
у=х с(2)-с(2)-1 
Endif => | Ese 
у=х 
с(3)=с(3)+1 
Endif 


如 果 测 试 结束 , 某 个 加 法 器 为 0 表示 没有 执行 ;如 果 某 个 加 法 器 不 为 0 表示 执行 过 ; 
如 果 某 个 加 法 器 不 相等 ,比如 c(3) 之 c(2) 表 示 此 程序 段 频率 高 ,需要 优先 测试 。 

程序 插 装 测试 主要 有 以 下 几 个 应 用 。 

(1) 覆盖 分 析 : 程序 插 装 可 以 估计 程序 控制 流 图 中 被 覆盖 的 程度 ,确定 测试 执行 的 
充分 性 ,从 而 设计 更 好 的 测试 用 例 , 提 高 测试 覆盖 率 。 

(2) 监控 : 在 程序 的 特定 位 置 设立 持 装 点 ,插入 用 于 记录 动态 特性 的 语句 ,用 来 监控 
程序 运行 时 的 某 些 特性 ,从 而 排除 软件 故障 。 

(3) 查找 数据 流 异 常 : 程序 插 装 可 以 记录 在 程序 执行 中 某 些 变量 值 的 变化 情况 和 变 
化 范围 。 掌 握 了 数据 变量 的 取 值 状况 ,就 能 准确 地 判断 是 否 发 生 数据 流 异 常 。 


4.4.2 程序 变异 测试 


程序 变异 测试 是 一 种 白 盒 测试 ,是 错误 驱动 测试 ,是 针对 某 种 类 型 的 特定 程序 的 错误 
而 提出 的 。 变 异 测试 是 一 种 比较 成 熟 的 排 错 性 测试 方法 , 排 错 性 测试 方法 的 基本 思想 是 
通过 检验 测试 数据 集 的 排 错 能 力 来 判断 软件 测试 的 充分 性 。 

程序 变异 测试 分 为 程序 强 变异 测试 和 程序 弱 变 异 测试 。 


1. 程序 强 变异 测试 


对 于 给 定 程序 已 ,假定 程序 中 存在 一 些小 错误 ,每 假设 一 个 错误 ,程序 P ШОР”, 
如 果 假 设 了 ?个 错误 : ei ,ez，,…,e,, 则 对 应 有 个 不 同 的 程序 Pi ,P,,…,P,, 这 里 P; 称 
为 P 的 变异 因子 。 

存在 测试 数据 Ci ,使 得 P 和 P; 的 输出 结果 是 不 同 的 。 因 此 ,根据 程序 P 和 每 个 变异 
的 程序 ,可 以 求 得 Pi ,P, ,…,P, 的 测试 数据 集 C 二 {C1 ,Cs，…,C,)。 运 行 C, 如 果 对 每 一 
个 Ci,P 都 是 正确 的 ,而 Р, 都 是 错误 的 ,这 说 明 Р 的 正确 性 较 高 。 如 果 对 某 个 C;,P 是 错 
误 的 ,而 Р, 是 正确 的 ,这 说 明 已 存在 错误 ,而 错误 就 是 e;。 

例如 ,表达 式 a>b, 可 以 会 被 以 下 表达 式 替 代 , 并 产生 变异 因子 。 


а>Ь,а==Ы,азЫ,а>=Ь,а<=Ь 


变异 测试 的 缺点 是 它 需要 大 量 的 计算 机 资源 来 完成 测试 充分 性 分 析 。 对 于 一 个 中 等 
规模 的 软件 ,所 需 的 存储 空间 也 是 巨大 的 ,运行 大 量变 异 因 子 也 导致 了 时 间 上 巨大 的 
开销 。 
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2. 程序 弱 变 异 测试 


弱 变 异 和 强 变异 有 很 多 相似 之 处 ,其 主要 差别 是 : 弱 变 异 强调 的 是 变动 程序 的 组 成 
部 分 ,根据 弱 变 异 准则 ,只 要 事先 确定 导致 P 与 P' 产 生 不 同 值 的 测试 数据 组 , 则 可 将 程序 
在 此 测试 数据 组 上 运行 ,而 并 不 实际 产生 变异 因子 。 程 序 弱 变异 测试 主要 优点 是 开销 较 
小 效率 较 高 。 


4.4.3 循环 语句 测试 


对 循环 语句 的 测试 主要 是 关注 循环 造成 的 程序 结构 复杂 度 的 提高 , 它 遵循 的 基本 测 
试 原 则 是 : 在 循环 的 边界 和 运行 界限 执行 循环 体 。 因 此 ,循环 语句 测试 总 是 与 边界 值 测 
试 密切 相关 。 从 本 质 上 说 ,循环 语句 测试 的 目的 就 是 检查 程序 中 循环 结构 的 有 效 性 。 循 
环 测试 是 一 种 着 重 循环 结构 有 效 性 测试 的 白 盒 测试 方法 。 循 环 结构 测试 用 例 的 设计 有 以 
下 三 种 模式 ,如 图 4-8 所 示 。 


КЕНЕ 


<> 
е 


图 4-8 简单 循环 ` 嵌 套 循 环 和 串 接 循环 


1. 简单 循环 


对 于 简单 循环 设计 测试 用 例 ,需要 考虑 以 下 几 种 情况 : 
(1) 0 次 循环 , 跳 过 循环 体 ; 

(2) 1 次 循环 ,要 检查 循环 初始 值 等 ; 

G) т 次 循环 ,m 二 n(n 是 最 大 循环 次 数 ) ,要 检查 多 次 循环 ; 
(4) 2.n 一 1 .nsn 十 1 次 循环 ,要 分 别 检查 若干 次 循环 。 
简单 循环 应 重点 测试 以 下 几 方 面 : 

。 循环 变量 的 初 值 是 否 正确 ? 

“ 循环 变量 的 最 大 值 是 否 正确 ? 

。 循环 变量 的 增 量 是 否 正确 ? 

。 何 时 退出 循环 ? 

例如 : 
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1 Void main () 
2 

3 int i=0; 

4 int sum=07 

5 while (1<=100) 

6 ( 

7 Sum= sum 1; 
8 itty 

9 } 

10 printf ("%а\п", sum) 
地 -} 


循环 变量 的 初 值 为 0, 循环 变量 的 最 大 值 为 100, 循 环 变量 的 增 量 为 i++ , 当 循环 变量 
超过 最 大 值 100 时 退出 循环 。 


2. RETI 
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级 增加 ,需要 考虑 以 下 几 种 情况 : 

(1) 对 于 最 内 层 循环 按 简单 循环 进行 测试 ,并 把 其 外 层 循环 设置 为 最 小 值 。 

(2) 逐步 向 外 层 循环 进行 测试 ,并 把 其 外 层 循环 设置 为 最 小 值 。 

(3) 反复 进行 (2) 测 试 ,直到 所 有 各 层 循环 测试 结束 。 


3. ВЕНЕ 


如 果 串 接 循环 的 各 个 循环 都 彼此 独立 , 则 可 以 使 用 简单 循环 的 方法 来 测试 串 接 循环 。 
当 循 环 不 独立 时 ,使 用 测试 嵌 套 循环 的 方法 来 测试 串 接 循环 。 


4.5 白 念 测试 策略 


在 白 盒 测试 中 ,可 以 使 用 各 种 测试 方法 的 综合 测试 如 下 所 示 。 

СТ) 在 白 盒 测试 中 ,应 尽量 先 用 工具 进行 静态 结构 分 析 。 

(2) 测试 中 可 采取 先 静 态 后 动态 的 组 合 方式 : 先进 行 静态 结构 分 析 、 代 码 审查 等 ,再 
进行 逻辑 覆盖 等 方法 测试 。 

(3) 利用 静态 分 析 的 结果 作为 引导 ,通过 代码 审查 和 动态 测试 的 方式 对 静态 分 析 结 
果 进 行进 一 步 的 确认 ,使 测试 工作 更 为 有 效 。 

(4) 覆盖 测试 是 白 盒 测 试 的 重点 ,一 般 可 使 用 基本 路 径 测试 法 达到 请 句 覆 盖 标 准 ; 对 
于 软件 的 重点 模块 ,应 使 用 多 种 覆盖 率 标准 衡量 代码 的 覆盖 率 ,如 满足 100%% 语 句 覆盖 的 
同时 满足 100% 分 支 覆 盖 等 。 

在 不 同 的 测试 阶段 ,测试 的 侧重 点 不 同 : 在 单元 测试 阶段 ,以 代码 审查 、 催 辑 覆 盖 为 
主 ; 在 集成 测试 阶段 ,需要 增加 静态 结构 分 析 、 静 态 质 量度 量 ; 在 系统 测试 阶段 ,应 根据 黑 
盒 测 试 的 结果 ,采取 相应 的 白 盒 测 试 。 
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习题 


1. 什么 是 白 盒 测试 ? 
2. 什么 是 静态 测试 和 动态 测试 ? 
З. 简 述 什么 是 语句 覆盖 判定 覆盖 条件 覆盖 、 判 定 /条 件 覆 盖 、 条 件 组 合 覆 盖 和 路 径 


4. 下 面 是 一 个 小 程序 段 ,作为 公用 程序 来 说 明 不 同 的 覆盖 标准 。 要 求 画 出 程序 流 
程 图 。 

(1) 按照 “语句 覆盖 ?选择 确定 测试 用 例 及 执行 路 径 。 

(2) 按照 “判定 覆盖 ”选择 确定 测试 用 例 及 执行 路 径 。 

(3) 按照 “条 件 覆 盖 ” 选 择 确定 测试 用 例 、 执 行路 径 和 条 件 取 值 。 

(4) 按照 “判定 /条 件 覆盖 ”选择 确定 测试 用 例 、 执 行路 径 和 条 件 取 值 。 

(5) 按照 “条 件 组 合 履 盖 ” 选 择 确定 测试 用 例 \ 执 行路 径 、 条 件 取 值 和 覆盖 组 合 。 

(6) 按照 “路 径 覆 盖 ” 选 择 确 定 测试 用 例 及 执行 路 径 。 


int k=0,j=0; 
if((x>3) && (2<10)) 
{ 
К-х%у-1; 
ј= заге (к); 
} 
іЁ((х== 4) ІІ (у> 5)) 
{ 
j=x* y+10; 
} 
ј=3%3; 
. 什么 是 代码 审查 ? 
. 什么 是 桌 前 检查 ? 桌 前 检查 的 重点 是 什么 ? 
. 什么 是 代码 走 查 ? 
. 什么 是 代码 评审 ?其 重点 是 什么 ? 
. 简 述 基于 缺陷 模式 测试 技术 的 特点 ,分 哪 几 大 类 。 


оо чо ол 
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第 5 章 单元 测试 


单元 测试 在 工作 中 到 处 存在 。 例 如 ,工厂 在 组 装 一 台电 视 机 之 前 ,对 每 个 元 器 件 都 要 
进行 测试 ;一 辆 汽车 的 零 部 件 有 上 万 个 ,任何 一 个 零 部 件 存 在 质量 问题 ,组 装 起 来 的 汽车 
就 会 存在 质量 问题 。 这 种 对 每 个 零件 进行 的 测试 ,就 是 单元 测试 。 

经 常 与 单元 测试 联系 起 来 的 另外 一 些 开 发 活动 包括 代码 走读 (Code Review) .静态 分 
析 (Static Analysis) 和 动态 分 析 (Dynamic Analysis)。 静 态 分 析 就 是 对 软件 的 源 代码 进 
行 研 读 ,查找 错误 或 收集 一 些 度量 数据 ,并 不 需要 对 代码 进行 编译 和 执行 。 动 态 分 析 , 是 
通过 观察 软件 运行 时 的 动作 来 提供 跟踪 、 时 间 分 析 以 及 测试 覆盖 度 方面 的 信息 。 


5.1 单元 测试 概述 


单元 测试 是 指 对 软件 中 的 最 小 可 测试 单元 进行 检查 和 验证 。 对 于 单元 测试 中 单元 的 
含义 ,一般 来 说 ,要 根据 实际 情况 去 判定 其 具体 含义 ,在 一 种 传统 的 结构 化 编程 语言 中 ,如 
C 语言 中 单元 指 一 个 函数 ,在 像 C++ 这 样 的 面向 对 象 的 语言 中 ,要 进行 测试 的 基本 单元 
是 类 ,图 形 化 的 软件 中 可 以 指 一 个 窗口 或 一 个 菜单 等 。 总 的 来 说 ,单元 就 是 人 为 规定 的 最 
小 的 被 测 功能 模块 。 单 元 测试 是 在 软件 开发 过 程 中 要 进行 的 最 低级 别 的 测试 活动 ,软件 
的 独立 单元 将 在 与 程序 的 其 他 部 分 相隔 离 的 情况 下 进行 测试 。 


51.1 单元 测试 的 定义 


单元 测试 (Unit Testing, 又 称 模块 测试 ) 是 在 软件 开发 过 程 中 进行 的 最 低级 别 的 测 
试 活动 ,或 者 说 是 针对 软件 设计 的 最 小 单位 程序 模块 进行 的 测试 工作 ,其 目的 在 于 发 现 每 
个 程序 模块 内 部 可 能 存在 的 差错 。 

单元 测试 由 程序 员 自 己 来 完成 ,最 终 受 益 的 也 是 程序 员 自 己 。 可 以 这 么 说 ,程序 员 有 
责任 编写 功能 代码 ,同时 也 就 有 责任 为 自己 的 代码 编写 单元 测试 。 执 行 单元 测试 ,就 是 为 
了 证 明 这 上 段 代码 的 行为 和 自己 期 望 的 一 致 。 

事实 上 ,人 们 每 天 都 在 做 单元 测试 。 你 写 了 一 个 函数 ,除了 极 简 单 的 外 ,总 是 要 执行 
一 下 ,看 看 功能 是 否 正常 .有 时 还 要 想 办 法 输出 些 数据 ,如 弹出 信息 窗口 ,这 也 是 单元 测 
试 ,把 这 种 单元 测试 称 为 临时 单元 测试 。 只 进行 了 临时 单元 测试 的 软件 ,针对 代码 的 测试 
很 不 完整 ,代码 覆盖 率 要 超过 70% 都 很 困难 .未 覆盖 的 代码 可 能 遗留 大 量 的 细小 的 错误 ， 
这 些 错误 还 会 互相 影响 , 当 Bug 暴露 出 来 的 时 候 难 于 调试 .大 幅度 提高 后 期 测试 和 维护 
成 本 ,也 降低 了 开发 商 的 竞争 力 。 可 以 说 ,进行 充分 的 单元 测试 ,是 提高 软件 质量 ,降低 开 
发 成 本 的 必由之路 。 


单元 测试 


对 程序 员 来 说 ,如 果 养 成 了 对 自己 写 的 代码 进行 单元 测试 的 习惯 ,不 但 可 以 写 出 高 质 
量 的 代码 ,而且 还 能 提高 编程 水 平 。 要 进行 充分 的 单元 测试 ,应 专门 编写 测试 代码 ,并 与 
产品 代码 隔离 。 比 较 简单 的 办 法 是 为 产品 工程 建立 对 应 的 测试 工程 ,为 每 个 类 建立 对 应 
的 测试 类 ,为 每 个 函数 建立 测试 函数 ,很 简单 的 除外 。 


5.1.2 单元 测试 的 目标 


单元 测试 是 在 软件 测试 过 程 中 最 低级 别 的 测试 活动 。 保 证 单元 模块 被 正确 地 编码 是 
单元 测试 的 主要 目标 ,但 还 不 够 ,单元 测试 还 要 实现 以 下 目标 。 

(1) 单元 实现 了 其 特定 的 功能 ,如 果 需 要 ,返回 正确 的 值 。 

(2) 单元 的 运行 能 够 覆盖 预先 设 定 的 各 种 逻辑 。 

(3) 在 单元 工作 过 程 中 ,其 内 部 数据 能 够 保持 完整 性 ,包括 全 局 变量 的 处 理 、 内 部 数 
据 的 形式 、 内 容 及 相互 关系 等 不 发 生 错误 。 

(4) 可 以 接收 正确 数据 ,也 能 处 理 非法 数据 ,在 数据 边界 条 件 上 ,单元 也 能 够 正确 
工作 。 
(5) 该 单元 的 算法 合理 ,性 能 良好 。 

(6) 该 单元 代码 经 过 扫描 ,没有 发 现任 何 安全 性 问题 。 
单元 测试 的 活动 模型 如 图 5-1 МЖ. 
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图 5-1 单元 测试 的 活动 模型 
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13 单元 测试 的 任务 


单元 测试 的 主要 任务 包括 巡 辑 、 功 能 .数据 和 安全 性 等 方面 的 测试 ,具体 如 下 。 
1. 检查 模块 接口 是 否 正 确 


(1) 输入 的 实际 参数 与 形式 参数 是 否 一 致 。 

(2) 调用 其 他 模块 的 实际 参数 与 被 调 模 块 的 形 参 是 否 一 致 。 
(3) 全 程 变 量 的 定义 在 各 模块 是 否 一 致 。 

(4) 外 部 输入 输出 。 


2. 检查 局 部 数据 结构 完整 性 


(1) 不 适合 或 不 相 容 的 类 型 说 明 。 

(2) 变量 无 初 值 。 

(3) 变量 初始 化 或 默认 值 有 错 。 

(4) 不 正确 的 变量 名 或 从 来 未 被 使 用 过 。 
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(5) 出 现 上 滋 或 下 溢 和 地 址 异常 。 
З. 检查 临界 数据 处 理 的 正确 性 


(1) 普通 合法 数据 的 处 理 。 
(2) 普通 非法 数据 的 处 理 。 
(3) 边界 值 内 合法 边界 数据 的 处 理 。 
(4) 边界 值 外 非法 边界 数据 的 处 理 。 


4. 检查 每 一 条 独立 执行 路 径 的 测试 ,保证 每 条 语句 被 至 少 执行 一 次 


(1) 算 符 优先 级 。 

(2) 混合 类 型 运算 。 
(3) 精度 不 够 。 

(4) 表达 式 符号 。 

(5) 循环 条 件 , 死 循环 。 


5. 预见 、 预 设 的 各 种 出 错 处 理 是 否 正确 /有效 


(1) 输出 的 出 错 信 息 难 以 理解 。 

(2) 记录 的 错误 与 实际 不 相符 。 

(3) 程序 定义 的 出 错 处 理 前 系统 已 介入 。 
(4) 异常 处 理 不 当 。 

(5) 未 提供 足够 的 定位 出 错 的 信息 。 


5.2 对 单元 测试 的 误解 


1. 单元 测试 浪费 了 太 多 的 时 间 


当 编码 完成 ,开发 人 员 总 是 会 迫切 希望 进行 软件 的 集成 工作 ,这 样 就 能 够 看 到 实际 的 
系统 开始 启动 工作 了 。 这 在 外 表 上 看 来 是 一 项 明显 的 进步 ,而 像 单元 测试 这 样 的 活动 也 
许 会 被 视 为 通 往 这 个 阶段 点 的 道路 上 的 障碍 ,推迟 了 对 整个 系统 进行 联 调 这 种 真正 有 意 
思 的 工作 启动 的 时 间 。 

在 这 种 开发 步骤 中 ,真实 意义 上 的 进步 被 外 表 上 的 进步 取代 了 。 系 统 能 够 正常 工作 
的 可 能 性 是 很 小 的 ,更 多 的 情况 是 充满 了 各 式 各 样 的 Bug。 在 实践 中 ,这 样 一 种 开发 步骤 
常常 会 导致 这 样 的 结果 : 软件 甚至 无 法 运行 。 更 进一步 的 结果 是 大 量 的 时 间 将 被 花费 在 
跟踪 那些 包含 在 独立 单元 里 的 简单 的 缺陷 上 面 ,在 个 别 情况 下 ,这些 Bug 也 许 是 琐碎 和 
微不足道 的 ,但 是 总 的 来 说 ,它们 会 导致 在 软件 集成 为 一 个 系统 时 增加 额外 的 工期 ,而 且 
当 这 个 系统 投入 使 用 时 也 无 法 确保 它 能 够 可 靠 运 行 。 

在 实际 工作 中 ,进行 了 完整 计划 的 单元 测试 和 编写 代码 所 花费 的 精力 大 致 上 是 相同 
的 。 一 旦 完成 了 这 些 单元 测试 工作 ,很 多 缺陷 将 被 纠正 ,在 确信 手头 拥有 稳定 可 靠 的 部 件 
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的 情况 下 ,开发 人 员 能 够 进行 更 高 效 的 系统 集成 工作 。 这 才 是 真实 意义 上 的 进步 ,所 以 说 
完整 计划 下 的 单元 测试 是 对 时 间 的 更 高 效 的 利用 ,而 调试 人 员 的 不 受 控 和 散漫 的 工作 方 
式 只 会 花费 更 多 的 时 间 而 效果 很 差 。 


2. 单元 测试 仅仅 是 证 明 这 些 代码 做 了 什么 


对 于 那些 没有 首先 为 每 个 单元 编写 一 个 详细 的 规格 说 明 , 而 直接 跳 到 编码 阶段 的 开 
发 人 员 而 言 , 当 编 码 完成 且 面 临 代码 测试 任务 的 时 候 ,就 阅读 这 些 代 码 并 求证 它 实际 上 做 
了 什么 ,把 测试 工作 施加 在 已 经 写 好 的 代码 上 。 当 然 , 他 们 无 法 证 明 任何 事情 ,所 有 的 这 
些 测试 工作 能 够 表明 的 事情 就 是 编译 器 工作 正常 。 他 们 也 许 能 够 抓 住 罕见 的 编译 器 缺 
陷 , 但 是 能 够 做 的 仅仅 是 这 些 。 

如 果 开 发 人 员 首 先 写 好 一 个 详细 的 规格 说 明 ,测试 能 够 以 规格 说 明 为 基础 ,代码 就 能 
够 针对 它 的 规格 说 明 ,而 不 是 针对 自身 进行 测试 。 这 样 的 测试 仍然 能 够 抓 住 编译 器 的 缺 
陷 , 同 时 也 能 找到 更 多 的 编码 错误 ,甚至 是 一 些 规格 说 明 中 的 错误 。 好 的 规格 说 明 可 以 使 
测试 的 质量 更 高 ,所 以 最 后 的 结论 是 高 质量 的 测试 需要 高 质量 的 规格 说 明 。 

在 实践 中 会 出 现 这 样 的 情况 ,一 个 开发 人 员 要 面 对 测 试 一 个 单元 时 只 给 出 单元 的 代 
码 而 没有 规格 说 明 这 样 吃力 不 讨好 的 任务 。 你 怎样 做 才 会 有 更 多 的 收获 ,而 不 仅仅 是 发 
现 编译 器 的 Bug? 比较 有 效 的 方法 是 倒 推 出 一 个 概要 的 规格 说 明 。 这 个 过 程 的 主要 输入 
条 件 是 要 阅读 那些 程序 代码 和 注释 ,主要 针对 这 个 单元 及 调用 它 和 被 它 调用 的 相关 代码 。 
画 出 流程 图 是 非常 有 帮助 的 ,可 以 用 手工 或 使 用 某 种 工具 ,可 以 组 织 对 这 个 概要 规格 说 明 
的 走读 ,以 确保 对 这 个 单元 的 说 明 没有 基本 的 错误 ,有 了 这 种 最 小 程度 的 代码 深层 说 明 ， 
就 可 以 用 它 来 设计 单元 测试 了 。 

3. 我 是 个 很 棒 的 程序 员 ,我 是 不 是 可 以 不 进行 单元 测试 


在 每 个 开发 组 织 中 都 至 少 有 一 个 这 样 的 开发 人 员 ,他 非常 擅长 于 编程 ,他 们 开发 的 软 
件 总 是 在 第 一 时 间 就 可 以 正常 运行 ,因此 不 需要 进行 测试 。 你 是 否 经 常 听 到 这 样 的 借口 ? 

在 真实 世界 里 ,每 个 人 都 会 犯错 误 。 即 使 某 个 开发 人 员 可 以 抱 着 这 种 态度 在 很 少 的 
一 些 简单 的 程序 中 应 付 过 去 。 但 真正 的 软件 系统 是 非常 复杂 的 ,真正 的 软件 系统 不 可 以 
寄 希 望 于 没有 进行 广泛 的 测试 和 Bug 修改 过 程 就 可 以 正常 工作 。 

编码 不 是 一 个 可 以 一 次 性 通过 的 过 程 。 在 真实 世界 中 ,软件 产品 必须 进行 维护 以 对 
操作 需求 的 改变 作出 反应 ,并 且 要 对 最 初 的 开发 工作 遗留 下 来 的 Bug 进行 修改 。 你 希望 
依靠 那些 原始 作者 进行 修改 吗 ? 这 些 制 造 出 这 些 未 经 测试 的 原始 代码 的 资深 专家 们 还 会 
继续 在 其 他 地 方 制造 这 样 的 代码 。 在 开发 人 员 做 出 修改 后 进行 可 重复 的 单元 测试 可 以 避 
免 产生 那些 令 人 不 快 的 副作用 。 


4. 集成 测试 将 会 抓 住所 有 的 缺陷 


在 前 面 的 讨论 中 已 经 从 一 个 侧面 对 这 个 问题 进行 了 部 分 阐述 。 这 个 论点 不 成 立 的 原 
因 在 于 规模 越 大 的 代码 集成 意味 着 复杂 性 就 越 高 。 如 果 软 件 的 单元 没有 事先 进行 测试 ， 
开发 人 员 很 可 能 会 花费 大 量 的 时 间 仅 仅 是 为 了 使 软件 能 够 运行 ,而 任何 实际 的 测试 方案 
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都 无 法 执行 。 

当 软 件 可 以 运行 了 ,开发 人 员 又 要 面 对 这 样 的 问题 : 在 考虑 软件 全 局 复杂 性 的 前 提 
下 对 每 个 单元 进行 全 面 的 测试 。 这 是 一 件 非常 困难 的 事情 ,甚至 在 创造 一 种 单元 调用 的 
测试 条 件 的 时 候 , 要 全 面 地 考虑 单元 的 被 调用 时 的 各 种 人 口 参数 。 在 软件 集成 阶段 ,对 单 
元 功能 全 面 测试 的 复杂 程度 远 远 超 过 独立 进行 的 单元 测试 过 程 。 

最 后 的 结果 是 测试 将 无 法 达到 它 所 应 该 有 的 全 面 性 。 一 些 缺 陷 将 被 遗漏 ,并 且 很 多 
缺陷 将 被 忽略 过 去 。 假 设 要 清洗 一 台 已 经 完全 装配 好 的 食物 加 工 机 器 ! 无 论 你 喷 了 多 少 
水 和 清洁 剂 ,一 些 食物 的 小 碎片 还 是 会 粘 在 机 器 的 死角 位 置 , 只 有 任 其 腐烂 并 等 待 以 后 再 
想 办 法 。 但 换个 角度 想 , 如 果 这 人 台 机 器 是 拆 开 的 ,这 些 死角 也 许 就 不 存在 或 者 更 容易 接触 
到 了 ,并 且 每 一 部 分 都 可 以 毫 不 费力 的 进行 清洗 。 


5. 成 本 效率 不 高 


一 个 特定 的 开发 组 织 或 软件 应 用 系统 的 测试 水 平 取决 于 对 那些 未 发 现 的 Bug 的 潜 
在 后 果 的 重视 程度 。 这 种 后 果 的 严重 程度 可 以 从 一 个 Bug 引起 的 小 小 的 不 便 到 发 生 多 
次 的 死机 的 情况 。 这 种 后 果 可 能 常常 会 被 软件 的 开发 人 员 所 忽视 (但 是 用 户 可 不 会 这 
样 ) ,这 种 情况 会 长 期 地 损害 这 些 向 用 户 提交 带 有 Bug 的 软件 开发 组 织 的 信誉 ,并且 会 导 
致 对 未 来 的 市 场 产 生 负 面 的 影响 。 相 反 地 ,一 个 可 靠 的 软件 系统 的 良好 的 声誉 将 有 助 于 
一 个 开发 组 织 获取 未 来 的 市 场 。 

很 多 研究 成 果 表明 ,无 论 什么 时 候 只 要 修改 都 要 进行 完整 的 回归 测试 ,在 生命 周期 中 
尽早 地 对 软件 产品 进行 测试 将 使 效率 和 质量 得 到 最 好 的 保证 。Bug 发 现 的 越 晚 ,修改 它 
所 需 的 费用 就 越 高 ,因此 从 经 济 角度 来 看 ,应 该 尽 可 能 早 地 查找 和 修改 Bug。 在 修改 费用 
变 得 过 高 之 前 ,单元 测试 是 一 个 在 早期 抓 住 Bug 的 机 会 。 

相 比 后 阶段 的 测试 ,单元 测试 的 创建 更 简单 ,维护 更 容易 ,并 且 可 以 更 方便 地 进行 重 
复 。 从 全 程 的 费用 来 考虑 , 相 比 起 那些 复杂 且 旷 日 持久 的 集成 测试 ,或 是 不 稳定 的 软件 系 
统 来 说 ,单元 测试 所 需 的 费用 是 很 低 的 。 

各 测试 阶段 测试 所 花费 时 间 的 示意 图 , 见 图 5-2 摘自 (实用 软件 度量 》(Capers Jones, 
McGraw-Hill,1991) ,从 图 中 可 以 看 出 单元 测试 的 时 间 成 本 效率 大 约 是 集成 测试 的 两 倍 、 
系统 测试 的 三 倍 。 


单元 测试 | 3.25 


0 2 4 6 8 10 12 14 
图 5-2 各 测试 阶段 测试 所 花费 时 间 的 示意 图 
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5.3 单元 测试 的 必要 性 


编写 代码 时 一 定 会 反复 调试 保证 它 能 够 编译 通过 。 如 果 是 编译 没有 通过 的 代码 ， 
没有 任何 人 会 愿意 交付 给 自己 的 老板 。 但 代码 通过 编译 ,只 是 说 明了 它 的 语法 正确 ; 
却 无 法 保证 它 的 语义 也 一 定 正确 ,没有 任何 人 可 以 轻易 承诺 这 段 代 码 的 行为 一 定 是 正 
确 的 。 好 在 单元 测试 会 为 我 们 的 承诺 作 担 保 。 编 写 单 元 测试 就 是 用 来 验证 这 段 代 码 
的 行为 是 否 与 人 们 期 望 的 一 致 。 有 了 单元 测试 ,可 以 自信 地 交付 自己 的 代码 ,而 没有 
任何 后 顾 之 忧 。 


1. 单元 测试 的 时 间 


单元 测试 越 早 越 好 。 一 般 是 先 编写 产品 函数 的 框架 ,然后 编写 测试 函数 ,针对 产品 函 
数 的 功能 编写 测试 用 例 , 然 后 编写 产品 函数 的 代码 ,每 写 一 个 功能 点 都 运行 测试 ,随时 补 
充 测 试用 例 。 所 谓 先 编写 产品 函数 的 框架 ,是 指 先 编写 函数 空 的 实现 ,有 返回 值 的 随便 返 
回 一 个 值 ,编译 通过 后 再 编写 测试 代码 ,这 时 ,函数 名 ,参数 表 、 返 回 类 型 都 应 该 确定 下 来 
了 ,所 编写 的 测试 代码 以 后 要 修改 的 可 能 性 比较 小 。 


2. 由 谁 负责 单元 测试 


单元 测试 与 其 他 测试 不 同 ,单元 测试 可 视 为 编码 工作 的 一 部 分 ,应 该 由 程序 员 完 成 ， 
也 就 是 说 ,经 过 了 单元 测试 的 代码 才 是 已 完成 的 代码 ,提交 产品 代码 时 也 要 同时 提交 测试 
代码 。 测 试 部 门 可 以 进行 一 定 程 度 的 审核 。 


3. 测试 效果 


根据 以 往 的 测试 经 验 来 看 ,单元 测试 的 效果 是 非常 明显 的 ,首先 , 它 是 测试 阶段 的 基 
础 ,做 好 了 单元 测试 ,再 做 后 期 的 集成 测试 和 系统 测试 时 就 很 顺利 。 其 次 ,在 单元 测试 过 
程 中 能 发 现 一 些 很 深层 次 的 问题 ,同时 还 会 发 现 一 些 很 容易 发 现 而 在 集成 测试 和 系统 测 
试 却 很 难 发 现 的 问题 。 再 次 单元 测试 关注 的 范围 也 特殊 , 它 不 仅仅 是 证 明 这 些 代 码 做 了 
什么 ,最 重要 的 是 代码 是 如 何 做 的 ,是 否 做 了 它 该 做 的 事情 而 没有 做 不 该 做 的 事情 。 


4. 测试 成 本 


在 单元 测试 时 某 些 问 题 很 容易 发 现 ,如 果 在 后 期 的 测试 中 发 现 问题 所 花 的 成 本 将 成 
们 上升。 比如 在 单元 测试 时 发 现 1 个 问题 需要 1 个 小 时 , 则 在 集成 测试 时 发 现 该 问题 需 
要 2 个 小 时 ,在 系统 测试 时 发 现 则 需要 3 个 小 时 , 同 理 还 有 定位 问题 和 解决 问题 的 费用 也 
是 成 倍数 上 升 的 ,这 就 是 要 尽 可 能 早 地 排除 尽 可 能 多 的 Bug 以 减少 后 期 成 本 的 因素 
Жа 


5. 产品 质量 


单元 测试 的 好 与 坏 直接 影响 到 产品 的 质量 ,可 能 就 是 由 于 代码 中 的 某 一 个 小 错误 就 
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导致 了 整个 产品 的 质量 降低 一 个 指标 ,或 者 导致 更 严重 的 后 果 , 如 果 做 好 了 单元 测试 ,这 
种 情况 是 可 以 完全 避免 的 。 

综 上 所 述 ,单元 测试 是 构筑 产品 质量 的 基石 ,不 要 因为 节约 单元 测试 的 时 间 不 做 单元 
测试 或 随便 做 而 在 后 期 浪费 太 多 的 时 间 ,更 不 能 由 于 节约 那些 时 间 导 致 开发 出 来 的 整个 
产品 失败 或 重 来 ,单元 测试 是 十 分 必要 性 的 。 


6. 单元 测试 的 优点 


1) 单元 测试 是 一 种 验证 行为 

程序 中 的 每 一 项 功能 都 是 测试 来 验证 它 的 正确 性 , 它 为 以 后 的 开发 提供 支援 。 就 算 
是 开发 后 期 ,也 可 以 轻松 地 增加 功能 或 更 改 程序 结构 ,而 不 用 担心 这 个 过 程 中 会 破坏 重要 
的 东西 。 而 且 它 为 代码 的 重 构 提供 了 保障 。 这 样 就 可 以 更 自由 地 对 程序 进行 改进 。 

2) 单元 测试 是 一 种 设计 行为 

编写 单元 测试 要 从 调用 者 的 角度 进行 观察 思考。 特别 是 先 写 测试 (testrfirst) ,必须 
把 程序 设计 成 易于 调用 和 可 测试 的 , 即 必 须 解除 软件 中 的 耦合 。 

3) 单元 测试 是 一 种 编写 文档 的 行为 

单元 测试 是 一 种 无 价 的 文档 , 它 是 展示 函数 或 类 如 何 使 用 的 最 佳 文档 。 这 份 文档 是 
可 编译 .可 运行 的 ,并 且 它 保持 最 新 ,永远 与 代码 同步 。 

4) 单元 测试 具有 回归 性 

自动 化 的 单元 测试 避免 了 代码 出 现 回 归 , 编 写 完成 之 后 ,可 以 随时 随地 快速 运行 
测试 。 


5.4 单元 测试 环境 和 方法 
541 驱动 模块 和 桩 模块 的 定义 


由 于 一 个 模块 并 不 是 一 个 独立 的 程序 ,在 考虑 测试 它 时 要 同时 考虑 它 和 外 界 的 联系 ， 
因此 要 用 到 一 些 辅 助 模块 ,来 模拟 与 所 测 模块 相 联 系 的 其 他 模块 。 一 般 把 这 些 辅助 模块 
分 为 两 种 。 

C) 驱动 模块 (driver) : 对 底层 或 子 层 模块 进行 (单元 或 集成 ) 测 试 时 所 编制 的 调用 
被 测 模块 的 程序 ,用 以 模拟 被 测 模块 的 上 级 模块 。 相 当 于 所 测 模块 的 主 程序 。 

(2) 桩 模块 (stub): 也 有 人 称 为 存根 程序 ,对 顶层 或 上 
层 模 块 进行 测试 时 ,所 编制 的 替代 下 层 模块 的 程序 ,用 以 模 
拟 被 测 模块 工作 过 程 中 所 调用 的 模块 。 用 于 代替 所 测 模块 被 测试 单元 
调用 的 子 模块 。 

所 测 模块 和 与 它 相关 的 驱动 模块 及 桩 模块 共同 构成 了 桩 模块 1 桩 模块 2 
一 个 “测试 环境 ”, 如 图 5-3 所 示 。 图 5-3 单元 测试 环境 


驱动 模块 
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5.4.2 驱动 模块 和 桩 模块 的 使 用 条 件 


1. 驱动 模块 的 使 用 条 件 


(1) 必须 要 驱动 被 测试 模块 执行 。 

(2) 必须 能 够 正确 接收 要 传递 给 被 测试 模块 的 各 项 参数 。 

(3) 能 够 对 接收 到 的 参数 的 正确 性 进行 判断 。 

(4) 能 够 将 接收 到 的 数据 传递 给 被 测 模块 。 

(5) 必须 接收 到 被 测试 模块 的 执行 结果 ,并 对 结果 的 正确 性 进行 判断 。 
(6) 必须 能 够 将 判断 结果 作为 用 例 执行 结果 输出 测试 报告 。 


2. 桩 模块 的 使 用 条 件 


СТ) 被 测试 模块 必须 要 调用 桩 模块 。 

(2) 必须 能 够 正确 接收 来 自 被 测试 模块 传递 的 各 项 参数 。 

(3) 桩 模块 要 能 够 对 接收 到 的 参数 的 正确 性 进行 判断 。 

(4) 桩 模块 对 外 的 接口 定义 必须 要 符合 被 测试 模块 调用 的 说 明 。 
(5) 桩 模块 必须 要 向 被 测试 模块 返回 一 个 结果 。 


3. 单元 测试 的 方法 


单元 测试 主要 采用 白 盒 测试 方法 , 辅 以 黑 盒 测 试 方法 。 白 盒 测 试 方法 应 用 于 代码 评 
审 .单元 程序 检验 之 中 ,而 黑 盒 测试 方法 则 应 用 于 模块 .组 件 等 大 单元 的 功能 测试 之 中 。 

静态 测试 技术 : 不 运行 被 测试 程序 ,对 代码 通过 检查 .阅读 进行 分 析 。 

三 部 曲 : 走 查 (Walk Through) .审查 (Inspection) 和 评审 (Review) 。 

动态 测试 需要 真正 将 程序 运行 起 来 ,需要 设计 系列 的 测试 用 例 保 证 测试 的 完整 性 和 
有 效 性 。 动 态 测试 又 可 以 采用 白 盒 测试 和 黑 盒 测试 。 

D 白 盒 测试 方法 

。 语句 覆盖 ; 

。 判定 覆盖 ; 

。 条 件 覆 盖 ; 

。 判定 /条 件 覆 盖 ; 

。 条 件 组 合 覆 盖 ; 

。 路 径 覆 盖 ; 


2) 黑 盒 常 用 方法 
。 等 价 类 划分 法 ; 
边界 值 分 析 法 ; 
。 错误 推测 法 ; 
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。 因果 图 法 ; 
。 功能 图 法 ; 

在 单元 测试 中 , 白 盒 及 黑 盒 方法 测试 用 例 的 使 用 训 先 熟 后 呢 ? 一 般 说 来 ,由 于 黑 盒 测 
试 是 从 被 测 单元 外 部 进行 测试 ,成 本 较 低 ,可 先 对 被 测 单元 进行 黑 盒 测试 ,之 后 再 进行 白 
盒 测 试 。 


5.5 单元 测试 策略 


1. 自 项 向 下 的 单元 测试 


先 对 最 顶层 的 基本 单元 进行 测试 ,然后 再 对 第 二 层 的 基本 单元 进行 测试 , 依 此 类 推 直 
到 测试 完 所 有 基本 单元 。 操 作 步 骤 如 下 : 

(1) 从 最 顶层 开始 ,把 顶层 调用 的 单元 做 成 桩 模块 。 

(2) 对 第 二 层 测 试 ,使 用 上 面 已 测试 的 单元 做 驱动 模块 。 

(3) 依次 类 推 , 直 到 全 部 单元 测试 结束 。 

自 项 向 下 的 单元 测试 的 优点 : 可 以 在 集成 测试 之 前 为 系统 提供 早期 的 集成 途径 。 

自 项 向 下 的 单元 测试 的 缺点 : 单元 测试 被 桩 模块 控制 , 随 着 单元 测试 的 不 断 进行 , 测 
试 过 程 也 会 变 得 越 来 越 复杂 ,测试 难度 以 及 开发 和 维护 的 成 本 都 不 断 增加 ;要 求 的 低层 次 
的 结构 覆盖 率 也 难以 得 到 保证 ;由 于 需求 变更 或 其 他 原因 而 必须 更 改 任何 一 个 单元 时 ,就 
必须 重新 测试 该 单元 下 层 调 用 的 所 有 单元 ;低层 单元 测试 依赖 项 层 测 试 ,无 法 进行 并 行 测 
试 ,使 测试 进度 受到 不 同 程度 的 影响 ,延长 测试 周期 。 

从 上 述 分 析 中 ,不 难看 出 该 测试 策略 的 成 本 要 高 于 孤立 的 单元 测试 成 本 ,因此 从 测试 
成 本 方面 来 考虑 ,并 不 是 最 佳 的 单元 测试 策略 。 


2. 自 底 向 上 的 单元 测试 


先 对 最 底层 的 基本 单元 进行 测试 ,然后 再 对 上 面 一 层 进行 测试 依 此 类 推 ,直到 测试 完 
所 有 单元 。 操 作 步 又 如 下 : 

(1) 先 对 模块 调用 图 上 的 最 底层 模块 开始 测试 ,模拟 调用 该 模块 的 模块 为 驱动 模块 。 

(2) 其 次 ,对 上 一 层 模块 进行 单元 测试 ,用 已 经 被 测试 过 的 模块 做 桩 模块 。 

(3) 依次 类 推 , 直 到 全 部 单元 测试 结束 。 

自 底 向 上 的 单元 测试 的 优点 : 不 需要 单独 设计 桩 模块 。 

自 底 向 上 的 单元 测试 的 缺点 : 随 着 单元 测试 的 不 断 进行 ,测试 过 程 会 变 得 越 来 越 复 
杂 ,测试 周 期 延长 ,测试 和 维护 的 成 本 增加 ; 随 着 各 个 基本 单元 逐步 加 入 ,系统 会 变 得 异常 
庞大 ,因此 测试 人 员 不 容易 控制 ; 越 接近 顶层 的 模块 的 测试 其 结构 覆盖 率 就 越 难以 保证 ; 
另外 ,顶层 测试 易 受 底层 模块 变更 的 影响 ,任何 一 个 模块 修改 之 后 ,直接 或 间接 调用 该 模 
块 的 所 有 单元 都 要 重新 测试 。 还 有 ,由 于 只 有 在 底层 单元 测试 完毕 之 后 才能 够 进行 顶层 
单元 的 测试 ,所 以 并 行 性 不 好 。 另 外 , 自 底 向 上 的 单元 测试 也 不 能 和 详细 设计 、 编 码 同步 
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相对 其 他 测试 策略 而 言 ,该 测试 策略 比较 合理 ,尤其 是 需要 考虑 对 象 或 复 用 时 。 它 属 
于 面向 功能 的 测试 ,而 非 面向 结构 的 测试 。 对 那些 以 高 覆盖 率 为 目标 或 者 软件 开发 时 间 
紧张 的 软件 项 目 来 说 ,这 种 测试 方法 不 适用 。 


3. 孤立 单元 测试 


不 考虑 每 个 单元 与 其 他 单元 之 间 的 关系 ,为 每 个 单元 设计 桩 模块 或 驱动 模块 。 每 个 
模块 进行 独立 的 单元 测试 。 

操作 步骤 : 无 须 考虑 每 个 模块 与 其 他 模块 之 间 的 关系 ,分 别 为 每 个 模块 单独 设计 桩 
模块 和 驱动 模块 ,逐一 完成 所 有 单元 模块 的 测试 。 

孤立 单元 测试 的 优点 : 该 方法 简单 容易 操作 ,因此 所 需 测试 时 间 短 ,能 够 达到 高 覆 
盖 率 。 
孤立 单元 测试 的 缺点 : 不 能 为 集成 测试 提供 早期 的 集成 途径 。 依 赖 结 构 设计 信息 ， 
需要 设计 多 个 桩 模块 和 驱动 模块 ,增加 了 额外 的 测试 成 本 。 

该 方法 是 比较 理想 的 单元 测试 方法 ,如 辅助 适当 的 集成 测试 策略 ,有 利于 缩短 项 目的 
开发 时 间 。 


5.6 单元 测试 用 例 设 计 


从 单元 测试 方法 中 已 经 知道 单元 测试 用 例 的 设计 既 可 以 使 用 白 盒 测试 也 可 以 使 用 黑 
盒 测 试 ,但 以 白 盒 测 试 为 主 。 

白 盒 测试 进入 的 前 提 条 件 是 测试 人 员 已 经 对 被 测试 对 象 有 了 一 定 的 了 解 ,基本 上 明 
确 了 被 测试 软件 的 逻辑 结构 。 白 盒 测试 应 该 达到 的 目标 是 : 100% 的 语句 覆盖 ,100% 的 
分 支 覆 盖 , 并 且 根 据 具体 软件 系统 的 要 求 增加 其 他 覆盖 测试 ,比如 财务 软件 银行 系统 、 航 
空 航天 等 。 

黑 盒 测试 是 要 首先 了 解 软件 产品 具备 的 功能 和 性 能 等 需求 ,再 根据 需求 设计 一 批 测 
试用 例 以 验证 程序 内 部 活动 是 否 符合 设计 要 求 的 活动 。 

测试 人 员 在 实际 工作 中 设计 单元 测试 用 例 应 该 满足 以 下 几 点 : 

(1) 测试 程序 单元 的 功能 是 否 实 现 。 

(2) 测试 程序 单元 性 能 是 否 满足 要 求 ( 可 选 ) 。 

(3) 是 否 有 可 选 的 其 他 测试 特性 ,如 边界 . 余 量 .安全 性 、 可 靠 性 .强度 测试 .人 机 交互 
界面 测试 等 。 

无 论 是 白 盒 测试 还 是 黑 盒 测 试 , 每 个 测试 用 例 都 应 该 包含 以 下 四 个 要 素 : 

(1) 被 测 单元 模块 初始 状态 声明 , 即 测试 用 例 的 开始 状态 。 

(2) 被 测 单元 的 输入 ,包含 由 被 测 单元 读 入 的 任何 外 部 数据 值 。 

СЗ) 该 测试 用 例 实际 测试 的 代码 ,用 被 测 单元 的 功能 和 测试 用 例 设 计 中 使 用 的 分 析 
来 说 明 。 

Са) 测试 用 例 的 期 望 输出 结果 。 
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测试 用 例 设计 步骤 如 下 : 

(1) 首先 使 被 测 单元 运行 。 

这 个 阶段 适合 的 技术 有 : 

O 模块 设计 说 明 导 出 的 测试 ; 

@ 对 等 区 间 划 分 。 

(2) 正面 测试 (Positive Testing). 
这 个 阶段 适合 的 技术 有 : 

O 设计 说 明 导 出 的 测试 ; 

O 对 等 区 间 划 分 ; 

O 状态 转换 测试 。 

(3) 负面 测试 (Negative Testing)。 
这 个 阶段 适合 的 技术 有 : 

O 错误 猜测 ; 

@ 边界 值 分 析 ; 

@ 内 部 边界 值 测 试 ; 

@ 状态 转换 测试 。 

(4) 模块 设计 需求 中 其 他 测试 特性 用 例 设 计 。 
这 个 阶段 适合 的 技术 : 设计 说 明 导 出 的 测试 。 
(5) 覆盖 率 测试 用 例 设计 。 

这 个 阶段 适合 的 技术 有 : 

Ф 分 支 测试 ; 

@ 条 件 测试 ; 

@ 状态 转换 测试 。 

(6) 测试 执行 。 

(7) 完善 代码 覆盖 。 

这 个 阶段 适合 的 技术 有 : 

Ф 分 支 测试 ; 

© 条 件 测试 ; 

@ 状态 转换 测试 。 


5.7 单元 测试 过 程 和 单元 测试 工具 
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1. 单元 测试 过 程 


1) 单元 测试 进入 和 退出 准则 
单元 测试 进入 和 退出 准则 分 别 如 表 5-1 和 表 5-2 所 示 。 
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表 5-1 进入 准则 
要 Ж 判断 准则 
详细 设计 说 明 书 经 过 审查 
单元 测试 用 例 获得 批准 
进入 配置 库 
表 5-2 退出 准则 
ЕЖ 判断 准则 
源 代码 文件 源 代码 文件 获得 批准 
源 代码 文件 清单 源 代码 文件 进入 配置 库 的 源 代码 区 
测试 用 例 源 代码 通过 同 级 评审 
软件 Bug 清单 提交 测试 负责 人 
单元 测试 报告 提交 软件 产品 配置 管理 


2) 单元 测试 过 程 

(1) 准备 阶段 ,配置 测试 环境 。 设 计 驱 动 模块 和 桩 模块 等 。 

(2) 编制 阶段 ,编写 测试 数据 ,根据 单元 测试 要 解决 的 问题 设计 测试 用 例 。 

(3) 代码 审查 阶段 ,包括 互 查 、 走 查 和 会 议 评审 等 。 

(4) 单元 测试 阶段 ,执行 单元 测试 用 例 , 并 且 详 细 记 录 测 试 结果 。 

(5) 评审 ,提交 阶段 ,对 单元 测试 结果 进行 评审 ,判定 测试 用 例 是 否 通过 ,并 提交 “ 单 
元 测试 报告 ”。 

(6) 可 以 进行 多 个 单元 的 并 行 测 试 。 


2. 单元 测试 工具 


单元 测试 工具 是 针对 不 同 的 编程 语言 和 不 同 的 开发 环境 而 设计 开发 的 测试 工具 。 单 
元 测试 工具 又 分 为 静态 测试 工具 和 动态 测试 工具 。 

静态 测试 工具 不 需要 运行 代码 ,而 是 直接 对 代码 进行 语法 扫描 和 所 定义 的 规则 进行 
分 析 , 找 出 不 符合 编码 规范 的 地 方 , 给 出 错误 报告 和 警告 信息 。 

动态 测试 工具 则 需要 通过 运行 程序 来 检测 程序 ,需要 写 测试 脚本 或 测试 代码 来 完成 
分 支 覆盖 .条 件 覆 盖 或 基本 路 径 覆 盖 的 测试 。 

C/C++ 语言 的 单元 测试 工具 ,例如 ,Parasoft C++、PR ОА • С/С ++ 、CompuWare 
DevPartner for Visual C++ BoundsChecker Suite, Panorama C++ 等 。 

Java 语言 的 单元 测试 工具 ,例如 ,JUnit 是 Java 社区 中 知名 度 最 高 的 单元 测试 工具 。 
它 诞生 于 1997 年 ,由 Erich Gamma 和 Kent Beck 共同 开发 完成 。Erich Gamma 是 经 典 
著作 《设计 模式 : 可 复 用 面向 对 象 软件 的 基础 ) 一 书 的 作者 之 一 ,并 在 Eclipse 中 有 很 大 的 
贡献 ;Kent Beck 则 是 一 位 极限 编程 (XP) 方 面 的 专家 和 先驱 。JUnit 设计 得 非常 小 巧 ,但 
是 功能 却 非常 强大 。 

(1) 内 存 资源 泄露 检查 工具 .如 CompuWare BounceChecker、 ІВМ Rational 
PurifyPlus 等 。 
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(2) 代码 覆盖 率 检查 工具 ,如 CompuWare TrueCoverage .ІВМ Rational PureCoverage、 
TeleLogic Logiscope 等 。 
(3) 代码 性 能 检查 工具 ,如 Logiscope 和 Macabe 等 。 


5.8 面向 对 象 的 单元 测试 


面向 对 象 的 单元 测试 一 般 是 对 一 个 类 或 一 个 类 族 的 测试 ,因为 类 是 面向 对 象 软件 的 
基本 单位 。 

类 测试 的 方法 就 是 通过 代码 检查 或 执行 测试 用 例 能 有 效 地 测试 一 个 类 的 代码 。 

作为 每 个 类 ,决定 是 将 其 作为 一 个 单元 进行 独立 测试 ,还 是 以 某 种 方式 将 其 作为 系统 
某 个 较 大 部 分 的 一 个 组 件 进行 独立 测试 ,需要 基于 以 下 因素 进行 决策 : 

(1) 这 个 类 在 系统 中 的 作用 ,尤其 是 与 之 相关 联 的 风险 程度 。 

(2) 这 个 类 的 复杂 性 (根据 状态 个 数 .操作 个 数 以 及 关联 其 他 类 的 程度 等 进行 衡量 ) 。 

(3) 开发 这 个 类 测试 驱动 程序 所 需 的 工作 量 。 

在 进行 类 测试 时 ,一般 要 考虑 以 下 几 个 方面 : 测试 人 员 测试 内 容 、 测 试 时间 、 测 试 过 
程 和 测试 程度 。 


1. 构建 测试 用 例 


首先 要 看 怎样 从 类 说 明 中 确定 测试 用 例 ,然后 根据 类 实现 引进 的 边界 值 来 扩充 附加 
的 测试 用 例 。 根 据 前 置 条 件 和 后 置 条 件 来 构建 测试 用 例 的 总 体 思想 是 : 为 所 有 可 能 出 现 
的 组 合 情 况 确定 测试 用 例 需求 。 在 这 些 可 能 出 现 组 合 情 况 下 ,可 以 满足 前 置 条 件 , 也 能 够 
达到 后 置 条 件 。 接 下 来 创建 测试 用 例 来 表达 这 些 需 求 , 根 据 这 些 需 求 还 可 以 创建 拥有 特 
定 输入 值 (包括 常见 值 和 边界 值 ) 的 测试 用 例 , 并 确定 它们 的 正确 输出 。 最 后 ,还 可 以 增加 
测试 用 例 来 曾 述 违反 前 置 条 件 所 发 生 的 情况 。 


2. 类 测试 系列 的 充分 性 


类 测试 系列 的 充分 性 的 三 个 常用 标准 是 : 基于 状态 的 覆盖 率 、 基 于 限制 的 覆盖 率 、 基 
于 代码 的 覆盖 率 。 

D 基于 状态 的 覆盖 率 ,以 测试 覆盖 了 多 少 个 状态 转换 为 依据 。 

(2) 基于 约束 的 覆盖 率 ,与 基于 状态 转换 的 充分 性 类 似 , 还 可 以 根据 有 多 少 对 前 置 条 
件 和 后 置 条 件 被 覆盖 来 表示 充分 性 。 

(3) 基于 代码 的 覆盖 率 。 当 所 有 的 测试 用 例 都 执行 结束 时 ,确定 实现 一 个 类 的 每 一 
行 代码 或 代码 通过 的 每 一 条 路 径 至 少 执行 了 一 次 ,这 是 一 种 很 好 的 思想 。 


3. 构建 测试 的 驱动 程序 


测试 驱动 程序 是 一 个 运行 测试 用 例 并 收集 运行 结果 的 程序 。 测 试 驱动 程序 的 设计 应 
该 相对 简单 ,因为 我 们 很 少 有 时 间 和 资源 来 对 驱动 程序 软件 进行 基于 执行 的 测试 (否则 会 
进入 一 个 程序 测试 递归 的 、 无 穷 无 尽 的 乱 局 ) ,而 是 依赖 代码 检查 来 检测 测试 驱动 程序 。 
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所 以 ,测试 驱动 程序 必须 是 严谨 的 、 结 构 清晰 简单 ,易于 维护 ,并 且 对 所 测试 的 类 说 明 变 
化 具有 很 强 的 适应 能 力 。 理 想 情况 下 ,在 创建 新 的 测试 驱动 程序 时 ,应 该 能 够 复 用 已 存在 
的 驱动 程序 的 代码 。 


习题 


1. 什么 是 单元 测试 ? 

2. 分 别 简 述 驱动 模块 和 桩 模块 的 使 用 条 件 。 

3. 什么 是 孤立 单元 测试 ? 

4, 简 述 测试 人 员 在 实际 工作 中 设计 单元 测试 用 例 应 该 满足 什么 。 
5. 简 述 单元 测试 过 程 。 


127 


第 6 章 集成 测试 


单元 测试 结束 后 ,测试 后 的 单元 虽然 可 以 独立 工作 ,但 是 当 把 它们 组 合 起 来 的 时 候 ， 
就 可 能 出 现 很 多 新 问题 。 根 据 在 设计 阶段 设计 好 的 软件 体系 结构 ,把 这 些 已 测试 过 的 单 
元 模块 组 装 起 来 进行 测试 ,这 就 是 所 谓 集成 测试 。 


6.1 集成 测试 概述 


下 面 通过 没有 充分 的 集成 测试 导致 重大 损失 的 实例 来 认识 为 什么 要 进行 集成 测试 。 
1999 年 ,美国 火星 探测 器 在 经 过 41 周 4. 16 亿 英里 的 成 功 飞行 之 后 ,在 就 要 进入 火星 轨 
道 时 失败 了 。 调 查 事故 原因 时 发 现 : 太空 科学 家 使 用 的 是 英制 ( 磅 ) 加 速度 数据 ,而 喷气 
推进 实验 室 采用 公制 (牛顿 ) 速 度数 据 进行 计算 。 这 就 是 没有 进行 充分 的 集成 测试 而 导致 
的 后 果 。 


1. 集成 测试 的 定义 


集成 测试 (Integration Testing) ,也 称 为 组 装 测 试 或 联合 测试 。 在 单元 测试 的 基础 
上 ,将 所 有 模块 按照 设计 要 求 组 装 成 为 子 系统 或 系统 ,进行 集成 测试 。 通 过 实践 发 现 , 一 
些 模块 虽然 能 够 单独 地 工作 ,但 并 不 能 保证 连接 起 来 也 能 正常 工作 。 程 序 在 某 些 局 部 反 
映 不 出 来 的 问题 ,在 全 局 上 很 可 能 暴露 出 来 ,影响 功能 的 实现 。 

集成 测试 是 在 单元 测试 的 基础 上 ,将 所 有 的 软件 单元 按照 概要 设计 规格 说 明 的 要 求 
在 组 装 成 模块 、 子 系统 或 系统 的 过 程 中 ,各 部 分 工作 是 否 达 到 或 实现 相应 技术 指标 及 要 求 
的 活动 。 也 就 是 说 ,在 集成 测试 之 前 ,单元 测试 应 该 已 经 完成 ,集成 测试 中 所 使 用 的 对 象 ， 
应 该 是 已 经 经 过 单元 测试 的 软件 单元 。 这 一 点 很 重要 ,因为 如 果 不 经 过 单元 测试 ,那么 集 
成 测试 的 效果 将 会 受到 很 大 影响 ,并 且 会 大 幅 增 加 软件 单元 代码 纠 错 的 代价 。 

集成 测试 是 单元 测试 的 逻辑 扩展 。 在 现实 方案 中 ,集成 是 指 多 个 单元 的 聚合 ,许多 单 
元 组 合成 模块 ,而 这 些 模块 又 聚合 成 程序 的 更 大 部 分 ,如 分 系统 或 系统 。 集 成 测试 采用 的 
方法 是 测试 软件 单元 的 组 合 能 否 正常 工作 ,以 及 与 其 他 组 的 模块 能 否 集成 起 来 工作 。 最 
后 ,还 要 测试 构成 系统 的 所 有 模块 组 合 能 否 正常 工作 。 集 成 测试 所 持 的 主要 标准 是 “软件 
概要 设计 规格 说 明 ”, 任 何不 符合 该 说 明 的 程序 模块 行为 都 应 该 加 以 记载 并 上 报 。 


2. 集成 测试 的 目的 


(1) 在 把 各 个 模块 连接 起 来 的 时 候 , 穿 越 模块 接口 的 数据 是 否 会 丢失 。 
(2) 一 个 模块 的 功能 是 否 会 对 另 一 个 模块 的 功能 产生 不 利 的 影响 。 
(3) 各 个 子 功能 组 合 起 来 ,能 否 达到 预期 要 求 的 父 功能 。 

(4) 全 局 数据 结构 是 否 有 问题 。 


集成 测试 


(5) 单个 模块 的 误差 累积 起 来 ,是 否 会 放大 ,从 而 达到 不 能 接受 的 程度 。 

(6) 在 单元 测试 的 同时 可 进行 集成 测试 ,发 现 并 排除 在 模块 连接 中 可 能 出 现 的 问题 ， 
最 终 构 成 要 求 的 软件 系统 。 

单元 测试 后 有 必要 进行 集成 测试 ,发 现 并 排除 在 模块 连接 中 可 能 发 生 的 上 述 问题 ,最 
终 构成 要 求 的 软件 子 系统 或 软件 系统 。 


3. 集成 测试 的 必要 性 


集成 测试 的 必要 性 主要 包括 : 

(1) 一 个 模块 可 能 对 另 一 个 模块 产生 不 利 的 影响 。 

(2) 可 能 会 发 现 单元 测试 中 未 发 现 的 接口 方面 的 错误 。 

(3) 将 子 功能 合成 时 不 一 定 产生 所 期 望 的 主 功能 。 

(4) 独立 可 接受 的 误差 ,在 组 装 后 可 能 会 超过 可 接受 的 误差 限度 。 

(5) 在 单元 测试 中 无 法 发 现时 序 问题 (实时 系统 ) 。 

(6) 在 单元 测试 中 无 法 发 现 资源 竞争 问题 。 

在 每 个 模块 完成 单元 测试 之 后 ,需要 着 重 考虑 一 个 问题 ,通过 什么 方式 将 模块 组 合 起 
来 进行 集成 测试 ? 所 有 的 软件 项 目 都 不 能 摆脱 集成 这 个 阶段 ,不 管 采用 什么 开发 模式 , 具 
体 的 开发 工作 总 得 从 一 个 个 软件 单元 做 起 ,软件 单元 只 有 经 过 集成 才能 形成 一 个 有 机 的 
整体 。 具 体 的 集成 过 程 可 能 是 显 性 的 也 可 能 是 隐 性 的 。 只 要 有 集成 ,总 是 会 出 现 一 些 常 
见 问题 ,工程 实践 中 集成 测试 ,几乎 不 存在 软件 单元 组 装 过 程 中 不 出 任何 问题 的 情况 。 集 
成 测试 需要 花费 的 时 间 远 远 超 过 单元 测试 ,直接 从 单元 测试 过 渡 到 系统 测试 是 极 不 妥当 
的 做 法 。 

集成 测试 的 必要 性 还 在 于 一 些 模块 虽然 能 够 单独 地 工作 ,但 并 不 能 保证 连接 起 来 也 
能 正常 工作 。 程 序 在 某 些 局 部 反映 不 出 来 的 问题 ,有 可 能 在 全 局 上 会 暴露 出 来 ,影响 功能 
的 实现 。 此 外 ,在 某 些 开发 模式 中 ,如 迭代 式 开 发 ,设计 和 实现 是 迭代 进行 的 。 在 这 种 情 
况 下 ,集成 测试 的 意义 还 在 于 它 能 间接 地 验证 概要 设计 是 否 具有 可 行 性 。 


4. 集成 测试 的 层次 


对 于 传统 软件 , 按 集 成 粒度 不 同 ,集成 测试 的 层次 可 以 分 为 三 个 层次 : 模块 间 集成 测 
试 . 子 系统 内 集成 测试 和 子 系统 间 集成 测试 。 

对 于 面向 对 象 的 应 用 系统 , 按 集成 粒度 不 同 , 集 成 测试 的 层次 可 分 为 两 个 层次 : 类 内 
集成 测试 和 类 间 集 成 测试 。 


5. 集成 测试 的 原则 


(1) 集成 测试 应 当 按 一 定 层次 进行 。 

(2) 所 有 公共 接口 必须 被 测试 到 。 

(3) 关键 模块 必须 进行 充分 测试 。 

(4) 集成 测试 策略 选择 应 当 综合 考虑 质量 成 本 和 进度 三 者 的 关系 。 
(5) 集成 测试 应 当 尽 早 开始 ,并 以 文档 为 基础 。 
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(6) 当 测 试 计划 中 的 结束 标准 满足 时 ,集成 测试 才能 结束 。 

Ст) 当 接 口 发 生 修改 时 ,涉及 的 相关 接口 都 必须 进行 回归 测试 。 
(8) 集成 测试 应 根据 集成 测试 计划 和 方案 进行 ,不 能 随意 测试 。 
(9) 项 目 管理 者 应 保证 测试 用 例 经 过 审核 。 

(10) 测试 执行 结果 应 当 如 实 记 录 。 


6.2 集成 测试 方案 


通常 有 两 种 模块 组 装 方案 : 非 渐 增 式 集成 和 渐 增 式 集成 。 非 渐 增 式 集成 先 分 别 测试 
每 个 模块 ,再 把 所 有 模块 按 设计 要 求 放 在 一 起 结合 成 所 要 的 程序 。 渐 增 式 集 成 是 把 下 一 
个 要 测试 的 模块 同 已 经 测试 好 的 模块 结合 起 来 进行 测试 ,然后 再 把 下 一 个 待 测试 的 模块 
结合 起 来 进行 测试 ,同时 完成 单元 测试 和 集成 测试 。 渐 增 式 集成 测试 的 实施 方案 有 很 多 
Б; 种 ,如 自 底 向 上 集成 测试 、 自 顶 向 下 集成 测试 .三 明治 集成 
І 测试 ,其 他 集成 测试 方法 还 有 核心 集成 测试 ,分 层 集成 测 
B 试 .基于 使 用 的 集成 测试 等 。 无 论 何 种 集成 测试 ,为 了 模 
RS 拟 各 个 模块 间 的 联系 ,都 需要 设置 若干 辅助 模块 ,分 为 驱 

[e] [5] [s] Б] 动 模 块 和 桩 模块 两 种 ,如 图 6-1 所 示 。 
图 6-1 驱动 模块 和 桩 模块 驱动 模块 (Driver): 用 以 模拟 待 测 模块 的 上 级 模块 ; 
接收 测试 数据 ,并 传送 给 待 测 模块 ,启动 待 测 模块 ,并 打印 


о 


= 1-4 > 


出 相应 的 结果 。 

桩 模块 (Stub) : 也 称 存 根 程序 。 用 以 模拟 待 测 模块 工作 过 程 中 所 调用 的 模块 。 桩 模 
块 由 待 测 模块 调用 ,它们 一 般 只 进行 很 少 的 数据 处 理 , 例 如 ,打印 人 口 和 返回 ,以 便于 检验 
待 测 模块 与 其 下 级 模块 的 接口 。 


621 大 爆炸 式 集成 测试 


大 爆炸 式 集成 即 非 渐 增 式 集 成 测试 (Big-Bang Integration Testing) ,又 称 一 次 性 集成 
或 大 棒 式 集成 ,首先 对 每 个 子 模块 进行 测试 ( 即 单元 测试 ) ,然后 将 所 有 模块 全 部 集成 起 来 
一 次 性 进行 集成 测试 。 例 如 ,如 图 6-2 所 示 的 程序 结构 图 ,采用 非 渐 增 式 集成 的 过 程 如 
图 6-3 所 示 。 

大 爆炸 式 集成 测试 的 优点 如 下 : 

(1) 可 以 并 行 测试 所 有 模块 。 

(2) 需要 的 测试 用 例 数目 少 。 

(3) 测试 方法 简单 、 易 行 。 

非 渐 增 式 集 成 测试 的 缺点 如 下 : B с р 

(1) 由 于 不 可 避免 存在 模块 间接 口 、 全 局 数据 结构 
等 方面 的 问题 ,所 以 一 次 运行 成 功 的 可 能 性 不 大 。 le] E] Le 

(2) 如 果 一 次 集成 的 模块 数量 多 .集成 测试 后 可 能 图 6-2 程序 结构 图 
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图 6-3 非 渐 增 式 集成 示意 图 


会 出 现 大 量 的 错误 。 另 外 ,修改 了 一 处 错误 之 后 ,很 可 能 新 增 更 多 的 新 错误 ,新 旧 错 误 混 
杂 , 给 程序 的 错误 定位 与 修改 带 来 很 大 的 麻烦 。 
(3) 即使 集成 测试 通过 ,也 会 遗漏 很 多 错误 。 


6.2.2 渐 增 式 集成 


1. 自 项 向 下 集成 测试 


自 顶 向 下 集成 测试 (Top-Down Integration Testing) 方 式 是 一 个 递增 的 组 装 软件 结 
构 的 方法 。 从 主 控 模块 ( 主 程序 ) 开 始 沿 控制 层 向 下 移动 ,把 模块 一 一 组 合 起 来 。 分 两 种 
方法 : 先 深度 ,按照 结构 ,用 一 条 主 控制 路 径 将 所 有 模块 组 合 起 来 ; 先 宽度 , 逐 层 组 合 所 有 
下 属 模块 ,在 每 一 层 水 平地 集成 测试 沿 着 移动 。 

自 顶 向 下 集成 测试 的 组 装 过 程 有 以 下 五 个 步骤 ， 

(1) 用 主 控 模 块 作为 测试 驱动 程序 ,其 直接 下 属 模块 用 承接 模块 来 代替 。 

(2) 根据 所 选择 的 集成 测试 法 ( 先 深度 或 先 宽度 ) ,每 次 用 实际 模块 代替 下 属 的 模块 。 

(3) 在 组 合 每 个 实际 模块 时 都 要 进行 测试 。 

(4) 完成 一 组 测试 后 再 用 一 个 实际 模块 代替 另 一 个 承接 模块 。 

(5) 可 以 进行 回归 测试 ( 即 重新 再 做 所 有 的 或 者 部 分 已 做 过 的 测试 ) ,以 保证 不 引入 


新 的 错误 。 
采用 自 顶 向 下 集成 测试 的 过 程 如 图 6-4 所 示 。 
ГА | ГА | 
в c [D = A => f с D 
Е Е sl s2] 53 54 55 
图 6-4 自 项 向 下 集成 测试 的 过 程 
自 顶 向 下 集成 测试 的 优点 如 下 : 


(1) 可 以 及 早 地 发 现 主 控 模 块 的 问题 并 加 以 解决 , 较 早 地 验证 了 主要 控制 和 判断 点 。 
D 如 果 选 择 深 度 优先 的 结合 方法 ,可 以 在 早期 实现 并 验证 一 个 完整 的 功能 ,增强 开 
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发 人 员 和 用 户 双 方 的 信心 。 

(3) 只 需 一 个 驱动 ,减少 驱动 器 开发 的 费用 。 

(4) 支持 故障 隔离 。 

自 顶 向 下 集成 测试 的 缺点 如 下 : 

(1) 柱 的 开发 量 大 。 

(2) 底层 验证 被 推迟 。 

(3) 底层 组 件 测试 不 充分 。 

自 项 向 下 集成 测试 适应 于 产品 控制 结构 比较 清晰 和 稳定 ;高层 接 口 变 化 较 小 ;底层 接 
口 未 定义 或 经 常 可 能 被 修改 ;产品 控制 组 件 具有 较 大 的 技术 风险 ,需要 尽早 被 验证 ;希望 
尽早 能 看 到 产品 的 系统 功能 行为 。 


2. 自 底 向 上 集成 测试 


自 底 向 上 的 集成 (Bottom-Up Integration) 方 式 是 最 常 使 用 的 方法 。 其 他 集成 方法 都 
或 多 或 少 地 继承 、 吸 收 了 这 种 集成 方式 的 思想 。 自 底 向 上 集成 方式 从 程序 模块 结构 中 最 
底层 的 模块 开始 组 装 和 测试 。 因 为 模块 是 自 底 向 上 进行 组 装 的 ,对 于 一 个 给 定 层次 的 模 
块 , 它 的 子 模块 (包括 子 模块 的 所 有 下 属 模块 ) 事 前 已 经 完成 组 装 并 经 过 测试 ,所 以 不 再 需 
要 编制 桩 模块 (一 种 能 模拟 真实 模块 ,给 待 测 模块 提供 调用 接口 或 数据 的 测试 用 软件 模 
块 ) 。 自 底 向 上 集成 测试 的 步骤 如 下 : 

(1) 按照 概要 设计 规格 说 明 ,明确 有 哪些 被 测 模块 。 在 熟悉 被 测 模块 性 质 的 基础 上 
对 被 测 模块 进行 分 层 , 在 同一 层次 上 的 测试 可 以 并 行进 行 。 

(2) 按时 间 线 序 关系 ,将 软件 单元 集成 为 模块 ,并 测试 在 集成 过 程 中 出 现 的 问题 。 这 
里 ,可 能 需要 测试 人 员 开 发 一 些 驱动 模块 来 驱动 集成 活动 中 形成 的 被 测 模块 。 对 于 比较 
大 的 模块 ,可 以 先 将 其 中 的 某 几 个 软件 单元 集成 为 子 模块 ,然后 再 集成 为 一 个 较 大 的 

(3) 将 各 软件 模块 集成 为 子 系统 (或 分 系统 )。 检 测 各 子 系统 是 否 能 正常 工作 。 

(4) 将 各 子 系统 集成 为 最 终 系统 ,测试 最 终 系 统 中 是 否 可 以 正常 工作 。 

自 底 向 上 的 集成 测试 方案 是 工程 实践 中 最 常用 的 测试 方法 。 相 关 技 术 也 较为 成 熟 。 
它 的 优点 很 明显 : 管理 方便 ,测试 人 员 能 较 好 地 锁定 软件 故障 所 在 位 置 。 但 它 对 于 某 些 
开发 模式 不 适用 ,这 些 开 发 模式 ,会 要 求 测试 人 员 在 全 部 软件 单元 实现 之 前 完成 核心 软件 
部 件 的 集成 测试 。 因 此 , 自 底 向 上 的 集成 测试 方法 仍 不 失 为 一 个 可 供 参考 的 集成 测试 


方案 。 
图 6-5 和 图 6-6 展示 了 采用 自 底 向 上 集成 测试 的 程序 结构 图 及 过 程 。 
自 底 向 上 集成 测试 的 优点 如 下 : 
(1) 尽早 地 验证 下 层 模 块 的 行为 ,对 底层 组 件 
行为 较 早 验证 。 B C D 
(2) 集成 测试 过 程 中 ,可 以 同时 对 系统 层次 结 C 
构图 中 不 同 的 分 支 进行 集成 测试 ,具有 并 行 性 , 比 E E £ E 


A ME FACER: WD T HER TAE o 图 6-5 自 底 向 上 集成 测试 的 程序 结构 图 
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图 6-6 自 底 向 上 集成 测试 的 过 程 


(3) 在 对 上 层 模 块 进行 测试 时 ,下 层 模 块 的 行为 就 已 经 得 到 了 验证 ,因此 在 向 上 集成 
的 过 程 中 , 越 靠近 主 控 模 块 的 上 层 模块 更 多 的 是 验证 其 控制 和 逮 辑 。 

(4) 提高 了 测试 效率 。 

(5) 容易 对 错误 进行 定位 。 

自 底 向 上 集成 测试 的 缺点 如 下 : 

(1) 直到 最 后 一 个 模块 加 进去 之 后 才能 看 到 整个 系统 的 框架 。 

(2) 只 有 到 测试 过 程 的 后 期 才能 发 现时 序 问 题 和 资源 竞争 问题 。 

(3) 驱动 模块 的 设计 工作 量 大 。 

(4) 高 层 模块 设计 上 的 错误 不 能 及 时 发 现 。 

(5) 对 高 层 的 验证 被 推迟 ,设计 上 的 错误 不 能 被 及 时 发 现 。 

自 底 向 上 集成 测试 适应 于 底层 接口 比较 稳定 ,高 层 接口 变化 比较 频繁 ,底层 组 件 较 早 
被 完成 。 


三 明治 集成 测试 (Sandwich Integration Testing) 综 合 了 自 顶 向 下 和 自 底 向 上 两 种 集 
成 方法 的 优点 。 桩 模块 和 驱动 模块 的 开发 工作 都 比较 小 。 其 代价 是 一 定 程度 上 增加 了 定 
位 缺陷 的 难度 。 

1) 三 明治 集成 测试 的 过 程 

(1) 确定 以 哪 一 层 为 界 进行 集成 ,如 图 6-7 中 的 В. 


图 6-7 三 明治 集成 测试 的 过 程 
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(2) 对 模块 B 及 其 所 在 层 下 面 的 各 层 使 用 自 底 向 上 的 集成 策略 。 
(3) 对 模块 了 所 在 层 上 面 的 层次 使 用 自 顶 向 下 的 集成 策略 。 
(4) 对 模块 B 所 在 层 各 模块 同 相应 的 下 层 集 成 。 

(5) 对 系统 进行 整体 测试 。 

三 明治 集成 测试 的 过 程 如 图 6-7 所 示 o 

2) 三 明治 集成 测试 的 优点 

(1) 集合 了 自 顶 向 下 和 自 底 向 上 两 种 策略 的 优点 。 

(2) 运用 一 定 的 技巧 ,能 够 减少 桩 模块 和 驱动 模块 的 开发 。 
3) 三 明治 集成 测试 的 缺点 

在 被 集成 之 前 ,中 间 层 不 能 尽早 得 到 充分 的 测试 。 

实践 经 验 表 明 三 明治 集成 测试 适应 于 大 部 分 软件 开发 项 目 。 


4. 改进 的 三 明治 集成 


改进 的 三 明治 集成 测试 (Modified Sandwich Integration Testing) 在 三 明治 集成 测试 
的 基础 上 ,不 仅 自 两 端 向 中 间 集 成 ,而 且 保证 每 个 模块 都 得 到 单独 的 测试 ,使 集成 测试 进 
行 得 更 彻底 ,参见 图 6-8。 


(тин тир) (мия) 


图 6-8 改进 的 三 明治 集成 测试 的 过 程 


6.2.3 几 种 集成 测试 比较 


下 面 将 大 爆炸 式 集成 测试 . 自 项 向 下 集成 测试 . 自 底 向 上 集成 测试 .三 明治 集成 测试 、 
改进 的 三 明治 集成 测试 进行 比较 ,参见 表 6-1. 
表 6-1 几 种 集成 测试 比较 


列 项 大 爆炸 式 自 项 向 下 | 自 底 向 上 三 明治 改进 的 三 明治 
集成 晚 т н 早 早 
基本 程序 工作 时 间 晚 早 晚 早 т 
需要 驱动 程序 是 ж 是 是 是 
需要 桩 程序 是 是 ж 是 是 
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续 表 
列 项 大 爆炸 式 自 项 向 下 | 自 底 向 上 三 明治 改进 的 三 明治 
工作 并 行 性 高 低 Ф 中 高 
特殊 路 径 测试 容易 难 容易 中 等 容易 
计划 与 控制 容易 难 容易 难 难 


6.2.4 基于 功能 的 集成 测试 


基于 功能 的 集成 测试 目的 是 采用 增值 的 方法 ,尽早 地 验证 系统 关键 功能 。 从 功能 实 
现 的 角度 出 发 ,按照 模块 的 功能 重要 程度 组 织 模块 的 集成 顺序 。 先 对 开发 中 最 主要 的 功 
能 模块 进行 集成 测试 ,依次 类 推 最 后 完成 整个 系统 的 集成 测试 。 

基于 功能 的 集成 测试 策略 具体 如 下 : 

(1) 确定 功能 的 优先 级 别 。 

(2) 分 析 优 先 级 最 高 的 功能 路 径 , 把 该 路 径 上 的 所 有 模块 集成 到 一 起 ,必要 时 使 用 驱 
动 模块 和 桩 模块 。 

(3) 增加 一 个 关键 功能 ,继续 步骤 (2) ,直到 所 有 模块 都 被 集成 到 被 测 系统 中 。 

基于 功能 的 集成 测试 优点 如 下 : 

(1) 直接 验证 系统 中 主要 功能 ,最 早 地 确认 所 开发 的 系统 中 关键 功能 得 以 实现 。 

(2) 测试 过 程 比 三 明治 策略 所 用 时 间 短 。 

(3) 验证 接口 的 正确 性 时 ,为 覆盖 接口 使 用 的 实例 相对 要 少 。 

(4) 可 以 减少 驱动 模块 的 开发 ,只 要 设计 和 维护 一 个 顶层 模块 的 驱动 器 。 

基于 功能 的 集成 测试 缺点 如 下 : 

(1) 不 适用 复杂 系统 。 

(2) 对 于 部 分 接口 测试 不 充分 ,容易 漏 掉 大 量 接口 错误 。 

(3) 集成 测试 开始 的 时 候 需 要 大 量 的 桩 模块 的 设计 。 

(4) 容易 出 现 相 对 大 的 元 余 测试 。 

基于 功能 的 集成 测试 适用 范围 ,主要 功能 具有 较 大 风险 性 的 产品 ;探索 型 技术 研发 项 
目 ;注重 功能 实现 的 项 目 ; 对 于 所 实现 的 功能 信心 不 强 的 产品 。 


6.2.5 核心 系统 先行 集成 测试 


核心 系统 先行 集成 测试 法 的 思想 是 先 对 核心 软件 部 件 进行 集成 测试 ,在 测试 通过 的 
基础 上 再 按 各 外 围 软件 部 件 的 重要 程度 逐个 集成 到 核心 系统 中 。 每 次 加 入 一 个 外 围 软件 
部 件 都 产生 一 个 产品 基线 ,直至 最 后 形成 稳定 的 软件 产品 。 核 心 系统 先行 集成 测试 法 对 
应 的 集成 过 程 是 一 个 逐渐 趋 于 闭合 的 螺旋 形 曲 线 , 代 表 产 品 逐 步 定 型 的 过 程 。 

核心 系统 先行 集成 测试 操作 步骤 如 下 : 

(1) 对 核心 系统 中 的 每 个 模块 进行 单独 的 、 充 分 的 测试 ,必要 时 使 用 驱动 模块 和 桩 
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模块 。 

(2) 对 于 核心 系统 中 的 所 有 模块 一 次 性 集合 到 被 测 系统 中 ,解决 集成 中 出 现 的 各 类 
问题 。 在 核心 系统 规模 相对 较 大 的 情况 下 ,也 可 以 按照 自 底 向 上 的 步骤 ,集成 核心 系统 的 
各 组 成 模块 。 

(3) 按照 各 外 围 软件 部 件 的 重要 程度 以 及 模块 间 的 相互 制约 关系 ,拟定 外 围 软件 部 
件 集成 到 核心 系统 中 的 顺序 方案 。 方 案 经 评审 以 后 , 即 可 进行 外 围 软 件 部 件 的 集成 。 

(4) 在 外 围 软 件 部 件 添 加 到 核心 系统 以 前 ,外 围 软 件 部 件 应 先 完成 内 部 的 模块 级 集 
成 测试 。 

(5) 按 顺 序 不 断 加 入 外 围 软件 部 件 ,排除 外 围 软件 部 件 集成 中 出 现 的 问题 ,形成 最 终 
的 用 户 系统 。 


6.2.6 客户 /服务 器 集成 测试 


客户 /服务 器 集成 测试 (Client/Server Integration Testing) 目 的 是 验证 客户 和 服务 器 
之 间 交 互 的 稳定 性 。 对 于 和 单独 的 服务 器 组 件 进行 松散 耦合 的 客户 端 组 件 , 可 以 使 用 客 
户 / 服 务 器 集成 来 完成 。 在 这 个 模型 中 ,不 存在 单独 的 控制 轨迹 。 

客户 /服务 器 集成 测试 策略 如 下 : 

(1) 单独 测试 每 个 客户 端 和 服务 器 端 ,必要 时 使 用 驱动 模块 和 桩 模块 。 

(2) 把 第 一 个 客户 端 或 客户 端 组 与 服务 器 进行 集成 。 

(3) 把 下 一 个 客户 端 或 客户 端 组 与 上 一 个 完成 的 系统 进行 集成 。 

(4) 重复 步骤 (3) 直 到 系统 中 所 有 客户 端 都 被 加 入 系统 中 。 

测试 模型 应 可 以 识别 客户 和 服务 器 。 测 试 过 程 如 下 : 

(1) 客户 十 服务 器 模块 。 每 个 客户 用 服务 器 的 桩 模块 测试 。 

(2) 服务 器 十 客户 模块 。 服 务 器 用 客户 的 桩 模块 测试 。 

(3) 客户 十 服务 器 。 用 户 对 实际 的 服务 器 测试 。 

客户 /服务 器 集成 测试 优点 如 下 : 

(1) 避免 了 大 爆炸 集成 的 风险 。 

(2) 集成 次 序 没 有 大 的 约束 ,可 以 结合 风险 或 功能 优先 级 进行 。 

(3) 有 利于 复 用 和 扩充 。 

(4) 支持 可 控制 和 可 重复 的 测试 。 

(5) 结构 清晰 。 

客户 /服务 器 集成 测试 缺点 如 下 : 

(1) 在 集成 过 程 中 ,需要 大 量 的 驱动 模块 和 桩 模块 。 

(2) 在 测试 的 末期 才能 检测 衔接 的 测试 用 例 。 

客户 /服务 器 集成 测试 适用 范围 是 客户 /服务 器 结构 的 系统 。 
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6.2.7 高 频 集 成 测试 


高 频 集成 测试 (High-frequency Integration Testing) 是 指 同步 于 软件 开发 过 程 ,每 隔 
一 段 时 间 对 开发 团队 的 现 有 代码 进行 一 次 集成 测试 。 如 某 些 自动 化 集成 测试 工具 能 实现 
每 日 深夜 对 开发 团队 的 现 有 代码 进行 一 次 集成 测试 ,然后 将 测试 结果 发 到 各 开发 人 员 的 
电子 邮箱 中 。 该 集成 测试 方法 频繁 地 将 新 代码 加 入 到 一 个 已 经 稳定 的 基线 中 ,以 免 集 成 
故障 难以 发 现 ,同时 控制 可 能 出 现 的 基线 偏差 。 高 频 集成 一 个 显著 的 特点 就 是 集成 次 数 
多 ,显然 ,人 工 的 方法 是 不 胜任 的 。 

使 用 高 频 集成 需要 具备 的 条 件 如 下 : 

(1) 可 以 获得 一 个 稳定 增 量 且 已 经 完成 的 部 分 通过 测试 ,未 发 现 错误 。 

(2) 大 部 分 有 意义 的 新 增 功能 可 以 在 一 个 恰当 的 频率 间隔 内 获得 。 

(3) 测试 包 和 代码 并 行 开 发 ,保证 维护 的 是 最 新 的 版 本 。 

(4) 使 用 自动 化 ,例如 采用 GUI 的 捕获 /回放 工具 。 

(5) 使 用 配置 管理 工具 ,实际 上 是 对 版 本 的 增 量 或 变更 进行 维护 。 

高 频 集成 测试 一 般 采 用 如 下 步骤 来 完成 ; 

(1) 选择 集成 测试 自动 化 工具 。 

(2) 设置 版 本 控制 工具 ,以 确保 集成 测试 自动 化 工具 所 获得 的 版 本 是 最 新 版 本 。 

(3) 测试 人 员 和 开发 人 员 负 责编 写 对 应 程序 代码 的 测试 脚本 。 

(4) 设置 自动 化 集成 测试 工具 ,每 隔 一 段 时 间 对 配置 管理 库 新 添加 的 代码 进行 自动 
化 的 集成 测试 ,并 将 测试 报告 汇报 给 开发 人 员 和 测试 人 员 。 

(5) 测试 人 员 监督 代码 开发 人 员 及 时 关闭 不 合格 项 。 

按照 步骤 (3) 至 (5) 不 断 循 环 , 直 至 形成 最 终 软件 产品 。 

高 频 集成 测试 优点 如 下 : 

(1) 尽早 查 出 错误 ,严重 错误 可 以 较 早 地 被 揭示 。 

(2) 集中 于 开发 一 个 可 运转 的 系统 。 

(3) 测试 辅助 模块 要 求 少 。 

(4) 高 效 性 ,对 防止 错误 有 帮助 。 

(5) 可 预测 性 ,提高 开发 人 员 的 信心 。 

(6) 并 行 性 ,开发 和 集成 可 以 并 行 。 

(7) 容易 进行 错误 定位 。 

高 频 集 成 测试 缺点 如 下 : 

(1) 是 初始 的 基线 定义 和 测试 不 易 平 稳 进 行 。 

(2) 测试 用 例 集合 有 时 候 可 能 不 能 暴露 深层 次 的 编码 错误 和 图 形 界面 错误 。 

(3) 如 果 没 有 适当 的 标准 作为 保证 ,成 功 的 集成 可 能 导致 不 应 有 的 可 信和 度 , 增 加 系统 
的 风险 性 。 

高 频 集成 测试 应 用 主要 有 和 迭代 增 量 开发 .版 本 维护 和 框架 开发 三 方面 。 
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6.3 ”集成 测试 用 例 设计 


集成 测试 需要 根据 具体 情况 决定 使 用 白 盒 测试 还 是 黑 盒 测 试 。 下 面 从 几 个 方面 说 明 


如 何 设计 集成 测试 用 例 。 


1. 为 系统 运行 设计 用 例 


目的 : 达到 合适 的 功能 覆盖 率 和 接口 覆盖 率 。 
使 用 的 主要 测试 方法 如 下 : 

(1) 等 价 类 划分 。 

(2) 边界 值 分 析 。 

(3) 决策 表 的 测试 。 


2. 为 正 向 集成 测试 设计 用 例 


测试 目标 : 验证 集成 后 的 模块 是 否 按照 设计 实现 了 预期 的 功能 。 

直接 根据 概要 设计 文档 导出 相关 测试 用 例 , 使 用 的 主要 测试 分 析 技 术 如 下 : 
(1) 输入 域 测试 。 

(2) 输出 域 测试 。 

(3) 等 价 类 划分 。 

(4) 状态 转换 测试 。 

(5) 规范 导出 法 。 


З. 为 逆向 集成 测试 设计 用 例 
测试 目标 : 分 析 被 测 接口 是 否 实现 了 需求 规格 没有 描述 的 功能 ,检查 规格 说 明 中 可 


能 出 现 的 接口 遗漏 等 。 


使 用 的 主要 测试 分 析 技 术 如 下 : 
(1) 边界 值 分 析 。 

(2) 特殊 值 测试 。 

(3) 错误 猜测 法 。 

(4) 基于 风险 的 测试 。 

(5) 基于 故障 的 测试 。 

(6) 状态 转换 测试 。 


4. 为 覆盖 设计 用 例 
测试 目标 : 功能 覆盖 和 接口 覆盖 ,通过 对 集成 后 的 模块 进行 分 析 , 判 断 哪些 功能 与 接 


口 没有 被 覆盖 来 设计 测试 用 例 。 


---------1138 


使 用 的 主要 测试 分 析 技术 如 下 : 
(1) 功能 覆盖 分 析 。 
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(2) 接口 覆盖 分 析 。 
5. 为 特殊 需求 设计 用 例 


测试 目标 : 接口 的 安全 性 指标 \ 性 能 指标 等 。 
为 特殊 需求 设计 用 例 可 使 用 的 主要 测试 分 析 技 术 为 规范 导出 法 。 


6. 基于 模块 接口 依赖 关系 设计 用 例 


测试 目标 : 模块 间接 口 的 组 合 关系 。 

模块 接口 依赖 关系 图 通常 是 一 个 无 环 有 向 图 ,属于 可 分 层 的 有 向 图 ,基于 模块 接口 依 
赖 关 系 设计 用 例 主 要 依赖 关系 来 设计 接口 的 组 合 关系 用 例 。 需 要 重点 分 析 那 些 在 实际 情 
况 中 可 能 发 生 的 组 合 关系 ,然后 设计 对 应 的 测试 用 例 进行 测试 。 

在 设计 集成 测试 用 例 的 过 程 中 要 注意 两 点 : 

(1) 测试 用 例 补 充 。 在 软件 开发 过 程 中 难免 会 因为 需求 变更 等 原因 发 生变 化 ,因此 
不 可 能 在 测试 工作 的 一 开始 就 100% 完 成 所 有 的 集成 测试 用 例 的 设计 ,这 就 需要 在 集成 
测试 阶段 能 够 及 时 跟踪 项 目 变化 ,按照 需求 增加 和 补充 集成 测试 用 例 ,保证 进行 充分 的 集 
成 测试 。 

(2) 在 集成 测试 的 过 程 中 ,要 注意 考虑 软件 开发 成 本 .进度 和 质量 这 三 方面 的 平衡 。 


6.4 ”集成 测试 过 程 


根据 IEEE 标准 集成 测试 可 划分 为 五 个 阶段 , 即 制定 集成 测试 计划 阶段 .设计 集成 测 
试 阶段 .实施 集成 测试 阶段 .执行 集成 测试 阶段 和 评估 集成 测试 阶段 ,如 图 6-9 所 示 。 


制定 集成 测试 计划 


设计 集成 测试 
П 


实施 集成 测试 
П 


执行 集成 测试 


评估 集成 测试 


图 6-9 集成 测试 过 程 


1. 制定 集成 测试 计划 阶段 


好 的 计划 是 成 功 的 开始 ,集成 测试 也 是 一 样 。 一 般 安排 在 概要 设计 评审 通过 后 大 约 
一 个 星期 的 时 候 , 需 要 参考 需求 规格 说 明 书 、 概 要 设计 文档 .产品 开发 等 。 

(1) 时 间 安 排 : 概要 设计 完成 评审 后 大 约 一 个 星期 。 

(2) 输入 项 目 : 需求 规格 说 明 书 ,概要 设计 文档 等 。 
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(3) 入 口 条 件 : 概要 设计 文档 已 经 通过 评审 。 

(4) 输出 项 目 : 集成 测试 计划 。 

(5) 出 口 条 件 : 集成 测试 计划 通过 评审 。 

制定 集成 测试 计划 阶段 需要 主要 完成 的 工作 有 : 

(1) 确定 被 测试 对 象 和 测试 范围 。 

(2) 评估 集成 测试 被 测试 对 象 的 数量 及 难度 , 即 工作 量 。 
(3) 确定 角色 分 工 和 划分 工作 任务 。 

(4) 标识 出 测试 各 个 阶段 的 时 间 ,任务 .约束 条 件 。 

(5) 考虑 一 定 的 风险 分 析 及 应 急 计划 。 

(6) 考虑 和 准备 集成 测试 需要 的 测试 工具 测试 仪器 、 环 境 等 资源 。 
(7) 考虑 外 部 技术 支援 的 力度 和 深度 ,以 及 相关 培训 安排 。 
(8) 定义 测试 完成 标准 。 


2. 设计 集成 测试 阶段 
一 般 在 详细 设计 开始 时 ,就 可 以 着 手 进行 。 可 以 把 需要 规格 说 明 书 、 概 要 设计 、 集 成 


测试 计划 文档 作为 参考 依据 。 


(1) 时 间 安 排 : 详细 设计 阶段 开始 。 

(2) 输入 项 目 : 需求 规格 说 明 书 概要 设计 和 集成 测试 计划 。 
(3) 入 口 条 件 : 概要 设计 基线 通过 评审 。 

(4) 输出 项 目 : 集成 测试 设计 方案 。 

(5) 出 口 条 件 : 集成 测试 设计 通过 详细 设计 评审 。 
设计 集成 测试 阶段 需要 主要 完成 的 工作 有 : 

(1) 被 测 对 象 结构 分 析 。 

(2) 集成 测试 模块 分 析 。 

(3) 集成 测试 接口 分 析 。 

(4) 集成 测试 策略 分 析 。 

(5) 集成 测试 工具 分 析 。 

(6) 集成 测试 环境 分 析 。 

(7) 集成 测试 工作 量 估计 和 安排 。 


3. 实施 集成 测试 阶段 
在 实施 的 过 程 中 ,要 参考 需求 规格 说 明 书 、 概 要 设计 、 集 成 测试 计划 、 集 成 测试 设计 等 


相关 文档 来 进行 。 


(1) 时 间 安 排 : 在 编码 阶段 开始 后 进行 。 

(2) 输入 项 目 : 需求 规格 说 明 书 、 概 要 设计 和 集成 测试 计划 、 集 成 测试 设计 。 

(3) 入 口 条 件 : 详细 设计 阶段 的 评审 已 经 通过 。 

(4) 输出 项 目 : 集成 测试 用 例 、 集 成 测试 规程 .集成 测试 代码 .集成 测试 脚本 、 集 成 测 


试 工具 。 
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(5) 出 口 条 件 : 测试 用 例 和 测试 规程 通过 编码 阶段 评审 。 
实施 集成 测试 阶段 需要 主要 完成 的 工作 有 : 

(1) 集成 测试 用 例 设计 。 

(2) 集成 测试 规程 设计 。 

(3) 集成 测试 代码 设计 。 

(4) 集成 测试 脚本 开发 。 

(5) 集成 测试 工具 开发 (如 果 需 要 )。 


4. 执行 集成 测试 阶段 


测试 人 员 在 单元 测试 完成 以 后 就 可 以 执行 集成 测试 。 当 然 , 须 按照 相应 的 测试 规程 ， 
借助 集成 测试 工具 ,并 把 需求 规格 说 明 书 、 概 要 设计 、 集 成 测试 计划 、 集 成 测试 设计 、 集 成 
测试 用 例 、 集 成 测试 规程 .集成 测试 代码 、 集 成 测试 脚本 作为 测试 执行 的 依据 来 执行 集成 
测试 用 例 。 测 试 执行 的 前 提 条 件 就 是 单元 测试 已 经 通过 评审 。 当 测试 执行 结束 后 ,测试 
人 员 要 记录 每 个 测试 用 例 执行 后 的 结果 ,填写 集成 测试 报告 ,最 后 提交 给 相关 人 员 评 审 。 

(1) 时 间 安 排 : 单元 测试 已 经 完成 后 就 可 以 开始 执行 集成 测试 了 。 

(2) 输入 项 目 : 需求 规格 说 明 书 ,概要 设计 和 集成 测试 计划 、 集 成 测试 规程 等 。 

(3) 入 口 条 件 : 单元 测试 阶段 已 经 通过 评审 。 

(4) 输出 项 目 : 集成 测试 报告 。 

(5) 出 口 条 件 : 集成 测试 报告 通过 评审 。 

执行 集成 测试 阶段 需要 主要 完成 的 工作 有 : 

(1) 按照 相应 的 测试 规程 ,借助 集成 测试 工具 ,并 把 需求 规格 说 明 书 、 概 要 设计 、 集 成 
测试 计划 /设计 /用 例 /代码 /脚本 作为 测试 执行 的 依据 来 执行 集成 测试 用 例 。 

(2) 测试 执行 的 前 提 条 件 就 是 单元 测试 已 经 通过 评审 。 

(3) 测试 执行 结束 后 ,测试 人 员 要 记录 每 个 测试 用 例 执行 后 的 结果 ,填写 集成 测试 报 
告 , 最 后 提交 给 相关 人 员 评 审 。 


5. 评估 集成 测试 阶段 


当 集 成 测试 执行 结束 后 ,要 召集 相关 人 员 ,如 测试 设计 人 员 ,编码 人 员 、 系 统 设计 人 员 
等 对 测试 结果 进行 评估 ,确定 是 否 通 过 集成 测试 。 

(1) 输入 项 目 : 集成 测试 计划 测试 结果 等 。 

(2) 行动 指南 : 相关 人 员 (测试 设计 人 员 .编码 人 员 、 系 统 设计 人 员 等 ) 对 测试 结果 进 
行 评估 ,确定 是 否 通过 集成 测试 。 

(3) 输出 项 目 : 测试 评估 摘要 。 


习题 


1. 简 述 什么 是 集成 测试 。 
2. 什么 是 驱动 模块 和 桩 模块 ? 


141 


《软件 测试 技术 教程 》 


3. 什么 是 大 爆炸 式 集成 测试 ? 
4. 什么 是 自 顶 向 下 集成 测试 ? 自 顶 向 下 集成 测试 的 优点 和 缺点 ? 
5. 什么 是 自 底 向 上 的 集成 测试 ? 
6. 什么 是 三 明治 集成 测试 ? 
7. 简 述 是 集成 测试 过 程 。 
8. 对 图 6-10 分 别 用 大 爆炸 式 集成 、 自 顶 向 下 集成 、 自 底 向 上 的 集成 和 三 明治 集成 方 
法 进行 测试 ,测试 过 程 如 何 ? 
A 
B с р] 
Е Е [н] 


图 6-10 测试 用 图 
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第 7 章 系统 测试 


系统 测试 (System Testing) 是 针对 整个 产品 系统 进行 的 测试 ,其 目的 是 验证 系统 是 
否 满足 了 需求 规格 的 定义 , 找 出 与 需求 规格 不 相符 合 或 与 之 矛盾 的 地 方 。 系 统 测试 的 对 
象 不 仅仅 包括 需要 测试 的 软件 ,还 要 包含 软件 所 依赖 的 硬件 设备 等 。 系 统 测试 实际 上 是 
针对 系统 中 各 个 组 成 部 分 进行 的 综合 性 检验 ,很 接近 人 们 的 日 常 测试 实践 。 开 发 出 来 的 
软件 只 是 实际 投入 使 用 系统 的 一 个 组 成 部 分 ,还 需要 检测 它 与 系统 其 他 部 分 能 否 协调 地 
工作 ,这 就 是 系统 测试 的 任务 。 系 统 测试 属于 黑 盒 测试 范畴 ,不 再 对 软件 的 源 代码 进行 分 
析 和 测试 。 

系统 测试 的 目标 是 通过 与 系统 的 需求 定义 比较 ,检查 软件 是 否 存 在 与 系统 定义 不 符 
合 或 与 之 矛盾 的 地 方 ,以 验证 软件 系统 的 功能 和 性 能 等 满足 其 规约 所 指定 的 要 求 。 


1. 系统 测试 前 的 准备 工作 


系统 测试 是 一 个 繁杂 的 工程 ,在 测试 前 做 好 准备 工作 是 十 分 必要 的 。 具 体 需 要 做 的 
准备 工作 有 : 

(1) 收集 软件 规格 说 明 书 ,作为 系统 测试 的 依据 。 

(2) 收集 各 种 软件 说 明 书 ,以 作为 系统 测试 的 参考 。 

(3) 仔细 阅读 软件 测试 计划 书 , 以 作为 系统 测试 的 根据 。 

通过 仔细 阅读 上 述 内 容 能 够 明确 回答 以 下 问题 ,为 系统 测试 做 好 准备 。 

(1) 对 系统 各 种 功能 的 描述 。 

(2) 对 系统 性 能 的 要 求 。 

(3) 对 兼容 性 的 描述 。 

(4) 对 配置 的 描述 。 

(5) 对 安全 方面 的 要 求 等 。 

(6) 系统 要 求 的 数据 处 理 及 传输 的 速率 。 

(7) 对 备份 及 修复 的 要 求 。 


2. 系统 测试 环境 


系统 测试 的 对 象 不 仅仅 包括 需要 测试 的 产品 系统 的 软件 ,还 要 包含 软件 所 依赖 的 硬 
件 设 备 ,系统 测试 环境 包括 硬件 环境 和 软件 环境 两 大 部 分 。 硬 件 环 境 是 指 测 试 必须 的 服 
务 器 、 客 户 端 网 络 连 接 设 备 以 及 打印 机 /扫描 仪 等 辅助 硬件 设备 所 构成 的 环境 ;软件 环境 
是 指 被 测 软 件 运行 时 的 操作 系统 数据 库 及 其 他 工具 软件 应 用 软件 组 成 的 环境 。 


3. 系统 测试 时 应 该 遵循 的 原则 
(1) 满足 软件 需求 的 各 项 功能 、 性 能 要 求 。 
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系统 的 安全 性 满足 用 户 的 需求 。 
系统 的 负载 能 力 满足 用 户 的 需求 。 
(4) 系统 与 外 界 支持 系统 正常 运行 。 
(5) 系统 的 稳定 性 等 满足 用 户 的 需求 。 
(6) 用 户 操作 手册 易 读 、 易 懂 、 易 操作 。 


4. 系统 测试 过 程 


一 般 可 以 把 系统 测试 的 过 程 划 分 为 五 个 阶段 , 即 拟定 测试 计划 阶段 ,用例 分 析 和 设计 
阶段 .实施 测试 阶段 ,执行 测试 阶段 ,分析 评估 和 生成 测试 报告 阶段 ,如 图 7-1 所 示 。 


қ: o 5% 


拟定 测试 计划 阶段 


用 例 分 析 和 设计 阶段 


实施 测试 阶段 


执行 测试 阶段 


分 析 评估 和 生成 测试 报告 
图 7-1 系统 测试 过 程 


第 一 阶段 ,拟定 测试 计划 阶段 : 系统 测试 计划 的 好 与 坏 影 响 着 后 续 测 试 工作 的 进行 ， 
系统 测试 计划 的 制定 对 系统 测试 的 顺利 实施 起 着 至 关 重 要 的 作用 。 一 般 是 由 测试 经 理 依 
据 系统 需求 规约 和 系统 需求 分 析 规 约 并 结合 项 目 计划 来 制定 ,有 时 系统 测试 计划 也 需要 
项 目的 管理 者 和 测试 技术 人 员 参 与 。 

拟定 测试 计划 阶段 包括 : 

(1) 系统 测试 范围 与 主要 内 容 。 

(2) 测试 技术 和 方法 。 

(3) 测试 环境 与 测试 辅助 工具 。 

(4) 系统 测试 的 进入 . 挂 起 和 恢复 及 完成 (退出 测试 的 准则 。 

(5) 人 员 与 任务 。 

(6) 缺陷 管理 与 跟踪 。 

第 二 阶段 ,用 例 分 析 和 设计 阶段 : 在 参考 系统 测试 计划 、 系 统 需求 规约 及 需求 分 析 规 
约 的 基础 上 ,对 系统 进行 测试 分 析 。 本 阶段 工作 主要 由 测试 技术 人 员 来 完成 。 

分 析 主 要 涉及 : 

С) 系统 业务 及 业务 流 分 析 。 

(2) 系统 级 别 的 接口 分 析 ,如 与 硬件 接口 .与 其 他 系统 接口 。 

(3) 系统 功能 分 析 。 

(4) 系统 级 别 的 输入 和 输出 分 析 。 

O) 系统 级 别 的 状态 转换 分 析 。 
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(6) 系统 级 别 的 数据 分 析 。 

(7) 系统 非 功能 分 析 , 如 安全 性 、 可 用 性 方面 的 分 析 。 

第 三 阶段 ,实施 测试 阶段 : 这 个 阶段 的 主要 工作 是 搭建 测试 环境 \ 准 备 测试 工具 、 测 
试 开 发 及 脚本 的 录制 ,可 能 还 会 涉及 必要 的 相关 培训 ,如 工具 的 培训 等 。 另 外 ,本 阶段 需 
要 确定 系统 测试 的 软件 版 本 基线 。 

第 四 阶段 ,执行 测试 阶段 : 本 阶段 主要 是 完成 测试 用 例 的 执行 记录、 问题 跟踪 修改 
等 工作 。 

第 五 阶段 ,分 析 评 估 和 生成 测试 报告 阶段 : 当 系统 测试 执行 结束 后 ,要 召集 相关 人 
员 ,如 测试 设计 人 员 .系统 设计 人 员 等 对 测试 结果 进行 评估 形成 一 份 系统 测试 分 析 报 告 ， 
测试 结果 数据 来 源 于 手工 记录 或 自动 化 工具 的 记录 ,以 确定 系统 测试 是 否 通 过 。 

分 析 评 估 的 内 容 一 般 涉及 : 测试 用 例 的 有 效 性 , 即 测 试用 例 本 身 可 能 存在 不 足 、 用 例 
执行 的 成 功率 等 ;测试 的 覆盖 情况 。 如 是 否 达 到 规定 的 覆盖 指标 ;缺陷 跟踪 与 解决 的 
情况 。 


5. 系统 测试 与 单元 测试 .集成 测试 之 间 的 区 别 


各 测试 阶段 测试 所 花费 时 间 的 示意 图 如 图 7-2 所 示 , 从 图 7-2 中 可 以 看 出 单元 测试 
的 时 间 成 本 效率 大 约 是 集成 测试 的 两 信 、 系 统 测试 的 三 信 。 
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图 7-2 各 测试 阶段 测试 所 花费 时 间 的 示意 图 


1) 测试 方法 不 同 

系统 测试 属于 黑 盒 测试 ;单元 测试 .集成 测试 属于 白 盒 测试 或 灰 盒 测试 。 

2) 测试 范围 不 同 

单元 测试 主要 测试 模块 的 内 部 接口 .数据 结构 .逻辑 .异常 处 理 等 对 象 ; 集 成 测试 测试 
模块 之 间 的 接口 和 异常 ;系统 测试 主要 测试 整个 系统 是 否 满足 用 户 的 需求 。 

3) 评估 基准 不 同 

系统 测试 的 评估 基准 是 测试 用 例 对 需求 规格 的 覆盖 率 ; 单 元 测试 和 集成 测试 的 评估 
主要 是 代码 的 覆盖 率 。 

4) 集成 测试 与 单元 测试 的 区 别 

(1) 测试 的 单元 不 同 。 单 元 测试 是 针对 基本 单元 (如 函数 等 ) 所 进行 的 测试 ;而 集成 
测试 是 以 模块 和 子 系统 为 单位 进行 的 测试 。 
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(2) 测试 的 依据 不 同 。 单 元 测试 是 针对 软件 详细 设计 所 进行 的 测试 ;而 集成 测试 是 


针对 概要 设计 进行 的 测试 。 


(3) 测试 空间 不 同 。 集 成 测试 不 关心 内 部 的 测试 空间 ,关注 的 是 接口 和 数据 间 的 组 


合 关系 。 


5) 集成 测试 与 系统 测试 的 区 别 
集成 测试 与 系统 测试 的 不 同 点 很 多 。 集 成 测试 仅 针对 软件 系统 展开 测试 ,而 系统 测 
试 中 所 涉及 的 系统 不 仅 包括 被 测 的 软件 本 身 ,还 包括 硬件 及 相关 外 围 设备 , 即 整 个 软件 系 
统 以 及 与 软件 系统 交互 的 所 有 硬件 与 软件 平台 。 


此 外 ,集成 测试 与 系统 测试 的 区 别 如 


表 7-1 所 示 。 
表 7-1 集成 测试 与 系统 测试 的 区 别 
列 项 集成 测试 系统 测试 
测试 对 象 单元 系统 
测试 时 间 开发 过 程 开发 完成 
测试 方法 黑 、 灰 (黑白 结合 ) RE 
测试 内 容 接口 需求 
测试 目的 接口 错误 需求 不 一 至 
测试 角度 开发 者 用 户 


6) 单元 测试 .集成 测试 和 系统 测试 三 者 测试 的 依据 不 同 

(1) 单元 测试 是 针对 软件 详细 设计 做 的 测试 ,测试 用 例 设 计 的 依据 是 详细 设计 说 
明 书 。 

(2) 集成 测试 是 针对 软件 概要 设计 做 的 测试 ,测试 用 例 设计 的 依据 是 概要 设计 说 
明 书 。 

(3) 系统 测试 是 针对 软件 需求 做 的 测试 ,测试 用 例 设计 的 依据 是 需求 规格 说 明 。 

本 章 从 性 能 测试 .可 靠 性 测试 ,安全 性 测试 ,恢复 性 测试 .备份 测试 .可 用 性 测试 ,协议 
测试 文档 测试 .GUI 测试 .网 站 测试 a 测试 和 8B 测试、 回归 测试 等 学 习 系 统 测试 。 


7.1 性 能 测试 


本 节 首 先 对 性 能 测试 做 概述 性 的 介绍 ,诸如 性 能 测试 指标 、 性 能 测试 阶段 和 测试 用 
例 , 其 后 是 对 性 能 测试 的 分 类 介绍 ,包括 容量 测试 .压力 测试 .负载 测试 等 。 


7.1.1 性 能 测试 概述 
性 能 测试 (Performance Testing) 是 检验 软件 是 否 达到 需求 规格 说 明 书 中 规定 的 各 类 


性 能 指标 ,并 满足 一 些 性 能 相关 的 约束 和 限制 条 件 。 性 能 测试 的 目的 通过 测试 ,确认 软件 
是 否 满足 产品 的 性 能 需求 ,同时 发 现 系统 中 存在 的 性 能 瓶 球 ,并 对 系统 进行 优化 。 
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性 能 测试 可 以 通过 自动 化 的 测试 工具 模拟 多 种 正常 .峰值 以 及 异常 负载 条 件 来 对 系 
统 的 各 项 性 能 指标 进行 测试 。 性 能 测试 与 其 他 测试 
大 体 一 样 ,需要 经 过 性 能 测试 计划 、 性 能 测试 设计 、 
性 能 测试 执行 和 性 能 测试 分 析 与 报告 等 几 个 过 程 ， 
这 几 个 过 程 是 一 个 迭代 的 过 程 ,经 过 执行 改进 .再 
执行 再 改进 、 再 执行 等 过 程 ,如 图 7-3 所 示 。 


1. 性 能 测试 指标 


性 能 测试 是 一 个 大 概念 ,覆盖 的 范围 非常 广泛 。 
性 能 测试 的 指标 主要 包括 响应 时 间 、 并 发 用 户 、 吞 吐 图 7-3 性 能 测试 阶段 周期 模型 示意 图 
量 和 性 能 计数 器 。 

1) 响应 时 间 

响应 时 间 (Response Time) 是 指 完成 用 户 请 求 的 时 间 , 如 从 向 系统 发 出 请 求 开始 ,到 
客户 端 接收 到 最 后 一 个 字 节 数据 为 止 所 消耗 的 时 间 。 对 用 户 来 讲 , 响 应 时 间 的 长 短 并 没 
有 绝对 的 区 别 。 例 如 , 某 公司 的 一 个 工资 系统 ,用 户 每 月 使 用 一 次 该 系统 ,每 次 进行 数据 
录入 等 操作 需要 2 小 时 以 上 的 时 间 , 当 用 户 选择 提交 后 ,即使 系统 在 半 小 时 后 才 给 出 处 理 
成 功 的 消息 ,用 户 仍 然 不 会 认为 系统 的 响应 时 间 不 能 接受 。 因 为 相对 于 一 个 月 才 进 行 一 
次 的 操作 来 说 , 半 小 时 是 一 个 可 以 接受 的 等 待 时 间 。 所 以 在 进行 性 能 测试 的 时 候 , 合 理 的 
响应 时 间 取 决 于 实际 的 用 户 需 求 ,而 不 能 根据 测试 人 员 自 己 的 设想 来 决定 。 

图 7-4 反 映 了 网 络 应 用 的 页 面 响应 时 间 分 解 图 。 网 络 传输 时 间 Ni 十 N; 十 Ns 十 Ni、 
应 用 延迟 时 间 А, HA: Аз ,而 应 用 延迟 时 间 又 可 以 分 为 数据 库 延 迟 时 间 A。 和 应 用 服务 
器 延迟 时 间 А, 十 As。 一 般 而 言 ,客户 认为 响应 时 间 2s 非常 有 吸引 力 , 响 应 时 间 5s 可 以 
接受 ,而 当 响应 时 间 10s 以 上 则 无 法 忍受 (会 撤销 事务 ) 。 


性 能 测试 分 析 与 报告 


图 7-4 网 络 应 用 的 页 面 响应 时 间 分 解 图 


响应 时 间 的 相关 术语 还 有 : 

。 连接 时 间 ”客户 机 和 服务 器 建立 连接 的 时 间 。 

。 发送 时 间 ”客户 机 向 服务 器 发 送 数据 的 时 间 。 

。， 接收 时 间 “服务 器 向 客户 机 发 送 响应 数据 的 时 间 。 

o 处理 时 间 ”服务 器 响应 客户 机 请 求 所 需要 的 时 间 。 

。 事务 时 间 ”客户 机 处 理 接收 数据 需要 的 时 间 。 

2) 并 发 用 户 数 

现实 生活 中 并 发 用 户 数 大 家 也 很 熟悉 。 以 电信 计 费 软件 为 例 。 大 家 都 有 体会 ,每 月 
二 十 几 号 是 市 话 交 费 的 高 峰 期 ,全 市 几 千 个 收费 网 点 同时 启动 。 收 费 过 程 一 般 分 为 两 步 ， 
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首先 要 根据 用 户 提 出 的 电话 号 码 来 查询 出 其 当月 产生 费用 ,然后 收取 现金 并 将 此 用 户 修 
改 为 已 交 费 状态 。 一 个 用 户 看 起 来 简单 的 两 个 步骤 ,但 当成 百 上 千 的 终端 ,同时 执行 这 样 
的 操作 时 ,情况 就 大 不 一 样 了 ,如 此 众多 的 交易 同时 发 生 , 对 应 用 程序 本 身 、 操 作 系统 .中 
心 数据 库 服务 器 .网络 设备 等 的 承受 力 都 是 一 个 严峻 的 考验 。 电 信 公 司 不 可 能 在 发 生 问 
题 后 才 考虑 系统 的 承受 力 ,应 该 预见 软件 的 并 发 承受 力 ,这 是 在 软件 测试 阶段 就 应 该 解决 
的 问题 。 

并 发 用 户 数 (Concurrency User) 一 般 是 指 同一 时 间 段 内 访问 系统 的 用 户 数量 。 在 实 
际 的 性 能 测试 中 ,经常 接 触 到 的 与 并 发 用 户 数 相关 的 概念 还 包括 * 系 统 用 户 数 "“ 同 时 在 
线 用 户 人 数 " 和 * 同 时 操作 用 户 数 ”。 

下 面 的 公式 是 估算 用 户 数 的 公式 。 

c=} 


T (7-1) 


СжСс--3УС (7-2) 
在 式 (7-1) 中 ,C 是 平均 的 并 发 用 户 数 ;n 是 登录 会 话 的 数量 ; 是 登录 会 话 的 平均 长 
度 ; 工 指 考察 的 时 间 段 长 度 。 


在 式 (7-2) 中 ,C 是 并 发 用 户 数 峰值 数 。 
例如 ,一 个 系统 每 天 有 400 个 用 户 访 问 ,用 户 在 一 天 内 有 8 小 时 使 用 该 系统 ,从 登录 
到 退出 系统 的 平均 时 间 为 4 小时。 
根据 式 (7-1) 和 式 (7-2) ,得 到 : 
_ 400X4_ 
C= ~z 200 
С ~ 200 + 3 V200 = 242 
3) 吞吐 量 
吞吐 量 (Throughout) 是 指 在 一 次 性 能 测试 过 程 中 网 络 上 传输 数据 量 的 总 和 。 一 般 
来 说 ,吞吐 量 用 请 求 数 / 秒 或 是 页 面 数 / 秒 来 衡量 。 从 业务 角度 分 析 , 吞 吐 量 用 访问 人 数 / 
天 或 者 处 理 业 务 数 /小 时 等 衡量 。 其 中 ,吞吐 率 == 吞 吐 量 /传输 时 间 , 体 现 软件 性 能 承载 
能 力 。 
吞吐 量 和 并 发 用 户 数 存在 一 定 的 联系 ,其 公式 是 : 


М XR 
Т 


p= (7-3) 


在 式 (7-3) 中 ,下 表示 吞吐 量 ; Nvu 表 示 虚 拟 用 户 个 数 ;R 表示 每 个 虚拟 用 户 发 出 的 请 
求 数 量 ; 工 表示 性 能 测试 所 用 的 时 间 。 遇 到 性 能 瓶颈 状况 ,吞吐 量 和 VU 数量 之 间 就 不 符 
вА. 

4) 性 能 计数 器 

性 能 计数 器 是 描述 服务 器 或 操作 系统 性 能 的 一 些 数据 指标 。 计 数 器 在 性 能 测试 中 发 
挥 着 监控 和 分 析 关 键 作 用 ,尤其 是 在 分 析 系 统 的 可 扩展 性 、 进 行 性 能 瓶颈 定位 时 ,对 计数 
器 的 取 值 的 分 析 比 较 关 键 。 

以 Windows 为 例 ,Windows 的 系统 任务 管理 器 就 有 一 个 性 能 计数 器 , 它 提供 了 测试 
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机 CPU 内存、 网 络 和 硬盘 的 使 用 信息 ,如 图 7-5 所 示 。 


E Windows ESENE 


应 用 程序 ] 进 程 “] 性 能 |ва (ЯР 


CPV 使 用 CPV 使 用 记录 | 
П ШЕКЕР | 
т 使 用 率 页 面 文件 使 用 记录 

| 
总 数 物理 内 存 中 
句柄 数 476 88 523504 
яни 36 可 用 数 158516. 
进程 数 34 Жат 260272 
认可 用 量 K) 核心 内 存 K | 
总 数 364556 8} 100400 
限制 1276308 ЭПЖ т4172 
шн 452 KAN 26228. 


进程 数 : 34 CPV WA: 19% ENU: 3568 / 12464 


B 7-5 Windows 系统 任务 管理 器 


与 性 能 计数 器 相关 的 资源 利用 率 ,是 指 系统 各 种 资源 的 使 用 状况 。 资 源 利 用 率 王 资 
源 的 实际 使 用 量 /总 的 资源 可 用 量 。 例 如 ,1000 个 用 户 并 发 访问 系统 ,网 络 服务 器 的 
CPU 的 占有 率 为 60% ,内 存 的 占有 率 为 50% ,这 里 的 60% 和 50% 就 是 资源 占有 率 。 
5) 思考 时 间 
思考 时 间 (Think Time) 称 为 休眠 时 间 , 是 指 用 户 请 求 的 间隔 时 间 。 在 交互 式 应 用 
中 ,用 户 不 大 可 能 持续 不 断 地 发 出 请 求 ,一 般 模式 是 用 户 发 出 一 个 请 求 ,等 待 一 段 时 间 ,再 
发 出 下 一 个 请 求 。 因 此 ,自动 化 测试 模拟 用 户 操作 就 必须 在 测试 脚本 中 让 各 个 操作 间隔 
- 段 时 间 ,在 操作 语句 之 间 设 置 Think 函数 ,实现 两 个 操作 之 间 的 等 待 时 间 。 
一 二 (7-4) 


通过 式 (7-3) 和 式 (7-4) 可 知 ,吞吐 量 与 Nvu 成 正比 ,与 Ts 成 反比 。 在 实际 测试 时 ,可 
以 按 如 下 步骤 计算 思考 时 间 。 

第 一 步 ,计算 系统 的 并 发 用 户 数 。 

第 二 步 ,统计 出 系统 的 平均 吞吐 量 。 

第 三 步 , 统 计 出 平均 用 户 发 出 的 请 求 数 量 。 

第 四 步 ,根据 式 (7-4) 计 算出 思考 时 间 。 


2. 性 能 测试 阶段 和 测试 用 例 


性 能 测试 一 般 要 经 过 三 个 阶段 : 
1) 计划 阶段 
(1) 定义 目标 并 设置 期 望 值 。 


У 


У 
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(2) 收集 系统 和 测试 要 求 。 

(3) 定义 工作 负载 。 

(4) 选择 要 收集 的 性 能 度量 值 。 

(5) 标 出 要 运行 的 测试 并 决定 什么 时 候 运行 它们 。 
(6) 决定 工具 选项 和 生成 负载 。 

(7) 编写 测试 计划 ,设计 用 户 场 景 并 创建 测试 脚本 。 
2) 测试 阶段 

(1) 建立 测试 服务 器 或 布置 其 他 设备 等 准备 工作 。 
(2) 运行 测试 。 

(3) 收集 数据 。 

3) 分 析 阶 段 

(1) 分 析 结 果 。 

(2) 改变 系统 以 优化 性 能 。 

(3) 设计 新 的 测试 。 

设计 性 能 测试 用 例 可 以 参考 表 7-2。 


表 7-2 测试 用 例 参考 指标 


监控 指标 ж g 
平均 负载 系统 正常 状态 下 ,最 后 60 秒 同步 进程 的 平均 个 数 
冲突 率 在 以 太 网 上 监测 到 的 每 秒 冲突 数 
进程 /线程 交换 率 进程 和 线程 之 间 每 秒 交 换 次 数 
CPU 利用 率 CPU 占用 率 % 
硬盘 交换 率 硬盘 交换 速率 
接收 包 错 误 率 接收 以 太 网 数据 包 时 每 秒 错误 数 
包 输入 率 每 秒 输入 的 以 太 网 数据 包 数 目 
中 断 速率 CPU 每 秒 处 理 的 中 断 数 
输出 包 错 误 率 发 送 以 太 网 数据 包 时 每 秒 错误 数 
包 输 入 率 每 秒 输出 的 以 太 网 数据 包 数 目 
读 和 内存 页 速率 物理 内 存 中 每 秒 读 入 内 存 页 的 数目 
写 出 内 存 页 速率 每 秒 从 物理 内 存 中 写 到 页 文件 中 的 内 存 页 数 
内 存 页 交换 速率 每 秒 写 人 内 存 页 和 从 物理 内 存 中 读 出 页 的 个 数 
进程 人 交换 率 交换 区 输入 的 进程 数目 
进程 出 交换 率 交换 区 输出 的 进程 数目 
系统 CPU 利用 率 系统 的 CPU 利用 率 % 
用 户 CPU 利用 率 用 户 模式 下 的 CPU 利用 率 % 
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性 能 测试 包括 压力 测试 .容量 测试 .负载 测试 等 ,这 些 测试 在 手段 和 方法 上 有 一 些 相 
似 性 ,一 般 会 使 用 相同 的 测试 环境 和 测试 工具 ,以 监测 系统 的 性 能 指标 。 


7.1.2 压力 测试 


压力 测试 是 对 系统 不 断 施加 压力 的 测试 ,是 通过 确定 一 个 系统 的 瓶颈 或 者 系统 难以 
承受 的 性 能 点 ,来 获得 系统 能 提供 的 最 大 服务 级 别 的 测试 。 例 如 ,测试 一 个 Web 站 点 在 
大 量 的 负荷 下 , 何 时 系统 的 响应 会 退化 或 失败 。 微 软 测试 实践 显示 , 当 软 件 产品 通过 72 
小 时 压力 测试 ,其 在 72 小 时 后 出 现 问题 的 可 能 性 极 小 ,因此 ,72 小 时 成 为 微软 产品 压力 
测试 的 时 间 标 志 。 

压力 测试 (Stress Testing) 也 叫 负荷 测试 .强度 测试 ,是 指 模拟 巨大 的 工作 负荷 ,以 查 
看 系统 在 峰值 使 用 情况 下 是 否 可 以 正常 运行 。 压 力 测试 是 通过 逐步 增加 系统 负载 来 测试 
系统 性 能 的 变化 ,并 最 终 确定 在 什么 负载 条 件 下 系统 性 能 处 于 失效 状态 ,以 此 来 获得 系统 
性 能 提供 的 最 大 服务 级 别 的 测试 。 压 力 测试 所 涉及 的 方面 主要 包括 数据 库 大 小 、 磁 盘 空 
间 、 可 用 内 存 空 间 .数据 通信 量 等 。 压 力 测试 用 例 的 参考 模板 如 表 7-3 HR 

表 7-3 压力 测试 用 例 参考 模板 
极限 名 称 A 最 大 并 发 用 户 数 量 

前 提 条 件 

输入 /动作 输出 /响应 是 否 能 正常 运行 

10 个 用 户 并 发 操作 

100 个 用 户 并 发 操作 


1. 压力 测试 的 特点 


(1) 压力 测试 是 检查 系统 处 于 压力 情况 下 的 能 力 表 现 。 

(2) 通过 不 断 增加 系统 压力 ,来 检测 系统 在 不 同 压 力 情况 下 所 能 够 达到 的 性 能 和 水 
准 。 比 如 ,通过 增加 并 发 用 户 的 数量 ,检测 系统 的 服务 能 力 和 水 平 ;: 通 过 增加 文件 记录 数 
来 检测 数据 处 理 的 能 力 和 水 平等 。 

(3) 压力 测试 一 般 通 过 模拟 方法 进行 。 

(4) 压力 测试 是 一 种 极端 情况 下 的 测试 。 

(5) 压力 测试 一 般 用 于 测试 系统 的 稳定 性 。 


2. 压力 测试 方法 


二 


м 


压力 测试 应 该 尽 可 能 逼真 地 模拟 系统 环境 。 对 于 实时 系统 ,测试 者 应 该 以 正常 和 超 
常 的 速度 输入 要 处 理 的 事务 从 而 进行 压力 测试 。 批 处 理 的 压力 测试 可 以 利用 大 批量 的 批 
事务 进行 ,被 测 事务 中 应 该 包括 错误 条 件 。 压 力 测试 的 测试 手段 包括 重复 压力 测试 .并 发 
压力 测试 、 量 级 增加 压力 测试 和 随机 压力 测试 。 
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1) 重复 压力 测试 

重复 测试 就 是 一 遍 又 一 遍地 执行 某 个 操作 或 功能 ,比如 重复 调用 一 个 Web 服务 。 

压力 测试 的 一 项 任务 就 是 确定 在 极端 情况 下 一 个 操作 能 和 否 正常 执行 ,并 且 能 和 否 持续 
不 断 地 在 每 次 执行 时 都 正常 。 这 对 于 推断 一 个 产品 是 否 适 用 于 某 种 生产 情况 至 关 重 要 ， 
客户 通常 会 重复 使 用 产品 。 重 复 测 试 往往 与 其 他 测试 手段 一 并 使 用 。 

2) 并 发 压力 测试 

并 发 是 同时 执行 多 个 操作 的 行为 , 即 在 同一 时 间 执 行 多 个 测试 线程 。 

例如 ,在 同一 个 服务 器 上 同时 调用 许多 Web 服务 。 并 发 测试 原则 上 不 一 定 适用 于 所 
有 产品 ,但 多 数 软件 都 具有 某 个 并 发 行为 或 多 线程 行为 元 素 , 这 一 点 只 能 通过 执行 多 个 代 
码 测试 用 例 才能 得 到 测试 结果 。 

3) 量 级 增加 压力 测试 

压力 测试 可 以 重复 执行 一 个 操作 ,但 是 操作 自身 也 要 尽量 给 产品 增加 负担 。 

例如 ,一 个 Web 服务 允许 客户 机 输入 一 条 消息 ,测试 人 员 可 以 通过 模拟 输入 超 长 消 
息 来 使 操作 进行 高 强度 的 使 用 , 即 增加 这 个 操作 的 量 级 。 这 个 量 级 的 确定 总 是 与 应 用 系 
统 有 关 , 可 以 通过 查找 产品 的 可 配置 参数 来 确定 量 级 。 例 如 ,数据 量 的 大 小 、 延 迟 时 间 的 
长 度 、. 输 入 速度 以 及 输入 的 变化 等 。 

4) 随机 压力 测试 

该 手段 是 指 对 上 述 测试 手段 进行 随机 组 合 , 以 便 获得 最 佳 的 测试 效果 。 

例如 ,使 用 重复 时 ,在 重新 启动 或 重新 连接 服务 之 前 ,可 以 改变 重复 操作 间 的 时 间 间 
隔 、 重 复 的 次 数 ,或 者 也 可 以 改变 被 重复 的 Web 服务 的 顺序 。 

使 用 并 发 时 ,可 以 改变 一 起 执行 的 Web 服务 、 同 一 时 间 运 行 的 Web 服务 数目 ,也 可 
以 改变 关于 是 运行 许多 不 同 的 服务 还 是 运行 许多 同样 的 实例 的 决定 。 

量 级 测试 时 ,每 次 重复 测试 时 都 可 以 更 改 应 用 程序 中 出 现 的 变量 (例如 发 送 各 种 大 小 
的 消息 或 数字 输入 值 ) 。 


3. 执行 压力 测试 


可 以 设计 压力 测试 用 例 来 测试 应 用 系统 的 整体 或 部 分 能 力 。 压 力 测试 用 例 选 取 可 以 
从 以 下 几 个 方面 考虑 : 

(1) 检查 是 否 有 足够 的 磁盘 空间 。 

(2) 检查 是 否 有 足够 的 内 存 空间 。 

(3) 创造 极端 的 网 络 负载 。 

(4) 制造 系统 溢出 条 件 。 

例如 , 某 个 电话 通信 系统 的 测试 。 测 试 采用 压力 测试 方法 。 在 正常 情况 下 ,每 天 的 电 
话 数目 大 约 2000 个 ,一 天 24 小 时 服从 正 态 分 布 。 在 系统 第 1 年 使 用 时 ,系统 的 平均 无 故 
障 时 间 大 约 1 个 月 左右 。 分 析 表 明 ,系统 的 出 错 原 因 主 要 来 源 于 单位 时 间 内 电话 数量 比 
较 大 的 情况 下 ,为 此 ,对 系统 采用 压力 测试 ,测试 时 将 每 天 电话 的 数目 增加 10 倍 , 即 
20 000 个 左右 ,分 布 采用 均匀 和 正 态 两 种 分 布 ,测试 大 约 进行 了 4 个 月 , 共 发 现 了 314 个 
错误 ,修复 这 些 错 误 大 约 花 费 了 6 个 月 的 时 间 , 修 复 后 的 系统 运行 了 近 2 年 ,尚未 出 现 
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问题 。 

压力 测试 的 测试 类 型 还 有 : 

(1) 稳定 性 压力 测试 ,高 负载 下 持续 运行 24 小 时 以 上 的 压力 测试 。 

(2) 破坏 性 压力 测试 ,通过 不 断 加 载 的 手段 ,快速 造成 系统 的 崩溃 ,让 问题 尽快 地 暴 
露出 来 。 

(3) 渗入 测试 ,通过 长 时 间 运 行 ,使 问题 逐渐 渗透 出 来 ,从 而 发 现 内 存 汇 露 \ 垃 圾 收集 
或 系统 的 其 他 问题 ,以 检验 系统 的 健壮 性 。 

(4) 峰 谷 测试 ,采用 高 低 突变 加 载 方式 进行 , 先 加 载 到 高 水 平 的 负载 ,然后 急剧 降低 
负载 ,稍微 平息 一 段 时 间 ,再 加 载 到 高 水 平 的 负载 ,重复 这 样 过 程 , 容 易 发 现 问题 的 蛛 丝 马 
迹 ,最 终 找到 问题 的 根源 。 


4. 压力 测试 步骤 


(1) 简单 多 任务 测试 。 
(2) 修正 简单 多 任务 测试 后 ,增加 系统 的 压力 直到 系统 崩溃 。 


7.1.3 容量 测试 


容量 测试 (Capacity Testing) 是 指 采 用 特定 的 手段 测试 系统 能 够 承载 处 理 任务 的 极 
限 值 所 从 事 的 测试 工作 。 这 里 的 特定 手段 是 指 , 测 试 人 员 根 据 实 际 运行 中 可 能 出 现 极限 ， 
制造 相对 应 的 任务 组 合 ,来 激发 系统 出 现 极限 的 情况 。 

容量 测试 的 目的 是 通过 测试 预先 分 析出 反映 软件 系统 应 用 特征 的 某 项 指标 的 极限 值 
(如 最 大 并 发 用 户 数 ,数据库 记录 数 等 ) ,系统 在 其 极限 状态 下 没有 出 现任 何 软件 故障 或 还 
能 保持 主要 功能 正常 运行 。 容 量 测试 的 目的 包括 ， 

(1) 通过 大 量 的 数据 容量 来 发 现 问题 。 

(2) 系统 性 能 .可 用 性 常常 会 在 系统 查找 或 排序 大 量 数据 的 时 候 被 降低 。 

(3) 确定 系统 在 其 极限 值 状态 下 是 否 还 能 保持 主要 功能 正常 运行 。 

(4) 容量 测试 还 将 确定 测试 对 象 在 给 定时 间 内 能 够 持续 处 理 的 最 大 负载 或 工作 量 。 

(5) 对 软件 容量 的 测试 ,能 让 软件 开发 商 或 用 户 了 解 该 软件 系统 的 承载 能 力 或 提供 
服务 的 能 力 , 如 电子 商务 网 站 所 能 承受 的 、 同 时 进行 交易 或 结算 的 在 线 用 户 数 。 

通过 容量 测试 知道 系统 的 实际 容量 ,如果 不 能 满足 设计 要 求 , 就 应 该 寻求 新 的 技术 解 
决 方案 ,以 提高 系统 的 容量 。 


1. 容量 测试 与 压力 测试 的 区 别 


压力 测试 与 容量 测试 十 分 相近 。 二 者 都 是 检测 系统 在 特定 情况 下 ,能 够 承担 的 极 
限 值 。 

(1) 然而 两 者 的 侧重 点 有 所 不 同 ,压力 测试 主要 是 使 系统 承受 速度 方面 的 超额 负载 ， 
例如 一 个 短 时 间 之 内 的 吞吐 量 。 

(2) 容量 测试 关注 的 是 数据 方面 的 承受 能 力 , 并 且 它 的 目的 是 显示 系统 可 以 处 理 的 
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数据 容量 。 

(3) 容量 测试 往往 应 用 于 数据 库 方面 的 测试 。 数 据 库容 量 测试 使 测试 对 象 处 理 大 量 
的 数据 ,以 确定 是 否 达 到 了 将 使 软件 发 生 故 障 的 极限 。 容 量 测试 还 将 确定 测试 对 象 在 给 
定时 间 内 能 够 持续 处 理 的 最 大 负载 或 工作 量 。 

压力 测试 和 容量 测试 的 测试 方法 有 相通 的 地 方 ,在 实际 测试 工作 中 ,往往 结合 起 来 进 
行 以 提高 测试 效率 。 


2. 容量 测试 方法 


进行 容量 测试 的 首要 任务 就 是 确定 被 测 系统 数据 量 的 极限 , 即 容量 极限 。 这 些 数 据 
可 以 是 数据 库 所 能 容纳 的 最 大 值 , 可 以 是 一 次 处 理 所 能 允许 的 最 大 数据 量 等 。 系 统 出 现 
问题 ,通常 是 发 生 在 极限 数据 量 产生 或 临界 产生 的 情况 下 ,这 时 容易 造成 磁盘 数据 的 丢 
失 、 缓 冲 区 溢出 等 一 些 问题 。 为 了 更 清楚 地 说 明 如 何 确定 容量 的 极限 值 , 参 见 图 7-6 所 示 
的 资源 利用 率 、 响 应 时 间 、 用 户 负载 关系 图 。 


用 户 负载 数 
图 7-6 资源 利用 率 、 响 应 时 间 .用 户 负载 数 关系 图 


从 图 7-6 中 反映 了 资源 利用 率 、 响 应 时 间 与 用 户 负载 数 之 间 的 关系 。 可 以 看 到 ,用 户 
负载 增加 ,响应 时 间 也 缓慢 的 增加 ,而 资源 利用 率 几乎 是 线形 增长 。 当 资源 利用 率 接近 百 
分 之 百 时 ,出 现 一 个 有 趣 的 现象 ,就 是 响应 以 指数 曲线 方式 下 降 , 这 点 在 容量 评估 中 称 为 
饱和 点 。 饱 和 点 是 指 所 有 性 能 指标 都 不 满足 ,随后 应 用 发 生 恺 慌 的 时 间 点 。 

为 了 确定 容量 极限 ,可 以 进行 一 些 组 合 条 件 下 的 测试 ,如 核实 测试 对 象 在 以 下 高 容量 
条 件 下 能 否 正 常 运行 : 链接 或 模拟 了 最 大 (实际 或 实际 允许 ) 数 量 的 客户 机 ;所 有 客户 机 
在 长 时 间 内 执行 相同 的 ,性 能 不 太 稳定 的 重要 任务 ;在 达到 最 大 的 数据 库容 量 的 情况 下 ， 
同时 处 理 多 个 查询 或 报表 事务 。 

容量 测试 还 要 考虑 选用 不 同 的 加 载 策略 的 问题 。 不 能 简单 地 说 在 某 一 标准 配置 服务 
器 上 运行 某 软件 的 容量 是 多 少 , 选 用 不 同 的 加 载 策略 可 以 反映 不 同 状况 下 的 容量 。 

例如 ,网 上 聊天 室 软 件 的 容量 是 多 少 ? 一 种 情况 是 一 个 聊天 室内 有 1 万 个 用 户 , 另 一 
种 情况 是 有 1 百 个 聊天 室 每 个 聊天 室内 有 1 百 个 用 户 ,两 种 情况 同样 都 是 1 万 个 用 户 ,在 
性 能 表现 上 可 能 会 出 现 很 大 的 不 同 , 在 服务 器 端 数据 输出 量 传输 量 更 是 截然 不 同 的 。 在 
更 复杂 的 系统 内 ,就 需要 分 别 为 多 种 情况 提供 相应 的 容量 数据 作为 参考 。 
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3. 容量 测试 的 步骤 


(1) 按 用 例 中 测试 环境 的 描述 建立 测试 系统 。 

(2) 准备 测试 过 程 ,合理 地 组 织 用 例 的 测试 流程 。 

СЗ) 根据 用 例 中 “初始 化 ”内 容 运 行 初始 化 过 程 。 

(4) 执行 测试 ,从 终止 的 测试 恢复 。 

(5) 验证 预期 结果 ,对 应 测试 用 例 中 描述 的 测试 目的 。 

(6) 调查 突 发 结果 , 即 对 异常 现象 进行 研究 ,适当 地 进行 一 些 回归 测试 。 
(7) 记录 问题 报告 。 


4. 不 同 的 容量 测试 


容量 测试 是 根据 预先 分 析出 的 某 项 指标 极限 值 , 测 试 系统 在 其 极限 值 状态 下 是 否 能 
保持 正常 运行 。 例 如 ,对 于 编译 程序 ,让 它 处 理 特别 长 的 源 程序 ;对 于 操作 系统 ,让 它 的 作 
业 队 列 * 满 员 ”; 对 于 信息 检索 系统 ,让 它 使 用 频率 达到 最 大 , 即 在 使 系统 的 全 部 资源 达到 
“ 满 负荷 "的 情形 下 ,测试 系统 的 承受 能 力 ,下 面 是 不 同情 况 的 容量 测试 。 

1) 在 线 系统 

输入 较 快 ,但 不 一 定 要 最 快 , 要 考虑 不 同 的 输入 方式 ,目的 是 测试 在 某 一 时 刻 临时 组 
冲 区 是 否 快 溢出 或 填 满 ,执行 过 程 中 是 否 会 停机 ,要 混合 使 用 创建 .更 新 . 读 和 删除 等 不 同 
的 操作 。 

2) 数据 库 系 统 

数据 库容 量 应 该 很 大 。 批 处 理 作业 是 在 大 量 的 业务 数据 下 运行 的 ,比如 数据 库 中 所 
有 对 象 都 需要 处 理 的 业务 。 复 杂 的 表 检 索 通过 分 类 来 实现 。 许 多 或 者 所 有 的 对 象 是 连接 
到 其 他 对 象 上 的 ,到 达 这 样 对 象 的 最 大 数量 。 在 合计 域 上 的 大 的 或 者 尽 可 能 最 大 的 数量 。 

3) 文件 交换 

文件 交换 特别 是 长 文件 。 比 如 邮件 协议 不 支持 的 长 度 。 当 然 还 有 许多 文件 ,甚至 与 
大 长 度 结合 。 电 子 邮 件 和 最 大 数量 的 附件 一 起 。 文 件 的 长 度 让 输入 缓冲 溢出 或 触发 超 
时 。 大 长 度 通常 是 为 了 在 通信 中 超时 设 定 。 

4) 磁盘 空间 

试 着 去 填充 磁盘 中 任何 有 磁盘 空间 的 地 方 。 检 查 如 果 是 已 经 不 再 有 空余 空间 ,其 至 
还 有 更 多 数据 要 填 入 这 个 系统 的 情况 下 ,会 发 生 什么 情况 。 有 没有 像 溢出 缓冲 区 这 样 的 
存储 区 ? 是 否 会 有 任何 警告 信号 ,故障 弱化 ? 是 否 会 有 合理 的 警告 ,数据 丢失 ? 这 可 以 通 
过 使 用 较 少 的 空间 ,在 较 小 容量 下 测试 的 测试 技巧 。 

5) 文件 系统 

文件 系统 的 文件 的 最 大 数目 或 者 最 大 长 度 。 

6) 内 存储 器 

最 小 可 用 内 存量 。 在 同一 时 间 打开 很 多 程序 ,起码 在 客户 端 平台 
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7.1.4 负载 测试 


负载 测试 (Load Testing) 是 通过 测试 系统 在 资源 超 负荷 情况 下 的 表现 ,以 发 现 设计 
上 的 错误 或 验证 系统 的 负载 能 力 。 在 这 种 测试 中 ,将 使 测试 对 象 承担 不 同 的 工作 量 , 以 评 
测 和 评估 测试 对 象 在 不 同 工 作 量 条 件 下 的 性 能 行为 ,以 及 持续 正常 运行 的 能 力 。 负 载 测 
试 的 目标 是 确定 并 确保 系统 在 超出 最 大 预期 工作 量 的 情况 下 仍 能 正常 运行 。 此 外 ,负载 
测试 还 要 评估 性 能 特征 ,例如 ,响应 时 间 .事务 处 理 速率 和 其 他 与 时 间 相 关 的 方面 。 

负载 测试 要 确定 在 各 种 工作 负载 下 系统 的 性 能 ,目的 是 测试 当 负载 逐渐 增加 时 ,系统 
组 成 部 分 的 相应 输出 项 ,例如 通过 量 、 响 应 时 间 、CPU 负载 .内 存 稳定 性 和 响应 等 。 负 和 载 
测试 可 以 从 以 下 两 方面 来 理解 : 

СТ) 负载 测试 是 站 在 用 户 角度 去 观察 在 一 定 条 件 下 软件 系统 的 性 能 表现 。 

(2) 负载 测试 的 预期 结果 是 用 户 的 性 能 需求 ,诸如 响应 时 间 、 并 发 用 户 数 、 事 务 处 理 
速率 等 得 到 满足 。 

负载 测试 与 压力 测试 是 两 个 很 容易 混淆 的 概念 ,负载 测试 是 通过 逐步 增加 系统 负载 ， 
测试 其 变化 ,看 最 后 在 满足 性 能 的 情况 下 ,系统 最 多 能 接受 多 大 的 负载 的 测试 。 压 力 测 试 
是 通过 逐步 增加 系统 的 复杂 性 来 测试 其 变化 ,看 最 后 在 满足 性 能 的 情况 下 ,能 使 系统 处 于 
失效 的 状态 ,通俗 来 说 ,就 是 发 现 系统 在 什么 条 件 下 系统 的 性 能 会 变 得 不 可 接受 ,压力 测 
试 是 一 种 特定 类 型 的 负载 测试 。 


7.2 ”可靠 性 测试 


可 靠 性 测试 (Reliability Testing) 是 软件 系统 在 规定 的 时 间 内 及 规定 的 环境 下 ,完成 
规定 功能 的 能 力 。 可 靠 性 测试 可 以 根据 软件 系统 可 靠 性 结构 寿命 类 型 和 各 单元 的 可 靠 
性 试验 信息 ,利用 概率 统计 方法 评估 出 系统 的 可 靠 性 特征 量 。 可 靠 性 测试 包括 三 个 要 素 : 
规定 的 时 间 ,规定 的 运行 环境 条 件 、 规 定 的 功能 。 一 般 情况 下 ,只 能 通过 对 软件 系统 进行 
测试 来 度量 其 可 靠 性 。 


7.2.1 可 靠 性 测试 方法 


测试 可 靠 性 是 指 运行 应 用 程序 ,以 便 在 部 署 系统 之 前 发 现 并 移 除 失 败 。 因 为 通过 应 
用 程序 的 可 选 路 径 的 不 同 组 合 非常 多 ,所 以 在 一 个 复杂 应 用 程序 中 不 可 能 找到 所 有 的 潜 
在 失败 。 但 是 ,可 测试 在 正常 使 用 情况 下 最 可 能 的 方案 ,然后 验证 该 应 用 程序 是 否 提 供 预 
期 的 服务 。 如 果 时 间 允 许 , 可 采用 更 复杂 的 测试 以 揭示 更 微小 的 缺陷 。 


1. 组 件 压力 测试 


压力 测试 是 指 模拟 巨大 的 工作 负荷 以 查看 应 用 程序 在 峰值 使 用 情况 下 如 何 执行 操 
作 。 利 用 组 件 压 力 测试 ,可 隔离 构成 组 件 和 服务 .推断 出 它们 公开 的 导航 方法 、 函 数 方法 
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和 接口 方法 以 及 创建 调用 这 些 方法 的 测试 前 端 。 
2. 集中 压力 测试 


对 每 个 单独 的 组 件 进行 压力 测试 后 ,应 对 带 有 其 所 有 组 件 和 支持 服务 的 整个 应 用 程 
序 进行 压力 测试 。 集 中 压力 测试 主要 关注 与 其 他 服务 、 进 程 以 及 数据 结构 (来 自 内 部 组 件 
和 其 他 外 部 应 用 程序 服务 ) 的 交互 。 

集中 测试 从 最 基础 的 功能 测试 开始 。 需 要 知道 编码 路 径 和 用 户 方案 、 了 解 用 户 试图 
做 什么 以 及 确定 用 户 运用 了 应 用 程序 的 所 有 方式 。 在 日 程 和 预算 允许 的 范围 内 ,应 始终 
尽 可 能 延长 测试 时 间 , 并 查看 应 用 程序 在 较 长 时 期 内 的 运行 情况 。 


3. 真实 环境 测试 


在 隔离 的 受 保护 测试 环境 中 可 靠 的 软件 ,在 真实 环境 的 部 署 中 可 能 并 不 可 靠 。 虽然 
隔离 测试 在 早期 的 可 靠 性 测试 进程 中 是 有 用 的 ,但 真实 环境 的 测试 环境 才能 确保 并 行 应 
用 程序 不 会 彼此 干扰 。 这 种 测试 经 常 发 现 与 其 他 应 用 程序 之 间 的 意外 导致 失败 的 交互 。 

需要 确保 应 用 程序 能 够 在 真实 环境 中 运行 , 即 能 够 在 具有 所 有 预期 客户 事件 配置 文 
件 的 服务 器 空间 中 ,使 用 最 终 配置 条 件 运 行 。 测 试 计 划 应 包括 在 最 终 目 标 环境 中 或 在 尽 
可 能 接近 目标 环境 的 环境 中 运行 应 用 程序 。 这 一 点 通常 可 通过 部 分 复制 最 终 环 境 或 小 心 
地 共享 最 终 环境 来 完成 。 


4. 随机 破坏 测试 


测试 可 靠 性 的 一 个 最 简单 的 方法 是 使 用 随机 输入 。 这 种 类 型 的 测试 通过 提供 虚假 的 
不 合 逻 辑 的 输入 ,努力 使 应 用 程序 发 生 故 障 或 挂 起 。 输 入 可 以 是 键盘 或 鼠标 事件 .程序 消 
息 流 、Web 页 ,数据 缓存 或 任何 其 他 可 强制 进入 应 用 程序 的 输入 情况 。 应 该 使 用 随机 破 
坏 测 试 测试 重要 的 错误 路 径 , 并 公开 软件 中 的 错误 。 这 种 测试 通过 强制 失败 以 便 可 以 观 
察 返 回 的 错误 处 理 来 改进 代码 质量 。 


7.2.2 ”可靠 性 测试 的 数学 模型 


假设 系统 S 投入 测试 或 运行 后 ,工作 一 段 时 间 后 ,软件 出 现 错误 ,系统 被 停止 并 进 
行 修复 ,经 过 Ti 时 间 后 ,故障 被 排除 ,又 投入 测试 或 运行 。 假 设 h stao ,i 是 系统 正常 
的 工作 时 间 ,T,T,,…,T, 是 维护 时 间 , 如 图 7-7 所 示 。 
和 C= 一 一 
图 7-7 系统 工作 状态 图 


1. 故障 率 ( 风 险 函 数 ) 


) 一 总 失效 时 间 n 
总 工作 时 间 ga, 


(7-5) 
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4 的 单位 是 FIT,1FIT==10 /小 时 。 


2. 维修 率 
总 失效 次 数 п 
p= АРКИ 一 一 (7-6) 
总 维护 时 间 Ут 
ізі 
3. 平均 无 故障 时 间 
Si 
总 工作 时 间 441 
MTEF = ARAKEA аА (7-7) 
4. 平均 维护 时 间 
ы Er 
sop 总 维护 时 间 60001 
MTTR = ARAKA ан а-а) 
5. 有 效 度 
А 总 工作 时 间 = МТВЕ ЖЕК” сез 
总 工作 时 间 十 总 维护 时 间 ”MTBF 十 MTTR д 
6. 可 靠 性 
ко = h (7-10) 
例如 , 某 个 系统 的 使 用 情况 如 图 7-8 所 示 。 
2 小 时 ”3 小 时 2.5 小 时 2.5 小 时 2.5 小 时 2.5 小 时 
20 天 20 天 


15 天 Е 


30 |х | 55% | 


图 7-8 某 个 系统 的 使 用 情况 


根据 题 义 ,n= 二 6,t 二 186 5 = 1488 小 时 (每 天 8 小 时 ) ,T=15 小 时 , 则 : 
МТВЕ= 248 小 时 

4 三 0.004/ 小 时 

МТТК= 2. 5 小 时 

Ap 一 0.4 

А=0. 99 
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7.3 安全 性 测试 


安全 性 测试 是 测试 系统 在 对 付 非 授权 的 内 部 或 外 部 侵入 ,访问 或 故意 损坏 时 的 系统 
防护 能 力 。 由 于 攻击 者 没有 闻 入 的 标准 方法 ,因而 也 没有 实施 安全 性 测试 的 标准 方法 。 
另外 ,目前 几乎 没有 可 用 的 工具 来 彻底 测试 各 个 安全 方面 。 


7.3.1 安全 性 测试 概述 


1508402 给 安全 性 下 的 定义 是 “伤害 或 损害 的 风险 限制 在 可 以 接受 的 水 平 内 ”。 安 全 
性 测试 (Security Testing) 是 有 关 验 证 系统 的 安全 性 和 识别 潜在 安全 性 缺陷 的 过 程 。 其 
目的 是 为 了 发 现 软件 系统 中 是 否 存 在 安全 漏洞 。 软 件 安全 性 是 指 在 非 正常 条 件 下 不 发 生 
安全 事故 的 能 力 。 

做 安全 性 测试 要 注意 一 点 ,应 注意 安全 性 测试 并 不 最 终 证 明 应 用 程序 是 安全 的 ,而 是 
用 于 验证 所 设立 对 策 的 有 效 性 ,这 些 对 策 是 基于 威胁 分 析 阶 段 所 做 的 假设 而 选择 的 。 例 
如 ,测试 应 用 软件 在 防止 非 授 权 的 内 部 或 外 部 用 户 的 访问 或 故意 破坏 等 情况 时 的 反应 。 

下 面 提供 测试 应 用 程序 安全 性 的 一 些 建议 。 

系统 安全 性 设计 有 两 点 准则 : 

准则 1, 使 非法 侵入 的 代价 超过 被 保护 的 信息 的 价值 ,从 而 令 非 法 侵入 者 无 利 可 图 。 

准则 2 ,一般 来 讲 , 如 果 黑 客 为 非法 入 侵 花 费 的 代价 (考虑 时 间 、 费 用 、 危 险 等 因素 ) 高 
于 得 到 的 好 处 ,那么 这 样 的 系统 可 以 认为 是 安全 的 系统 。 

下 面 是 测试 系统 安全 性 时 要 考虑 的 一 些 问题 。 


1. 测试 缓冲 区 溢出 


缓冲 区 溢出 是 计算 机 历史 中 被 利用 的 第 一 批 安 全 错误 之 一 。 目 前 ,缓冲 区 溢出 继续 
是 最 危险 也 是 最 常 发 生 的 弱点 之 一 。 试 图 利用 这 种 脆弱 性 可 以 导致 种 种 问题 ,从 损坏 应 
用 程序 到 攻击 者 在 应 用 程序 进程 中 插入 并 执行 恶意 代码 。 将 数据 写 入 缓冲 区 时 ,开发 人 
员 向 缓冲 区 写 和 的 数据 不 能 超出 其 所 能 存放 的 数据 。 如 果 正 在 写 人 的 数据 量 超出 已 分 配 
的 缓冲 区 空间 ,将 发 生 缓 冲 区 溢出 。 当 发 生 缓冲 区 溢出 时 ,会 将 数据 写 入 可 能 为 其 他 用 途 
而 分 配 的 内 存 部 分 中 。 最 坏 的 情形 是 缓冲 区 溢出 包含 恶意 代码 ,该 代码 随后 被 执行 。 缓 
冲 区 溢出 在 导致 安全 脆弱 性 方面 所 占 的 百分比 很 大 。 


2. 实施 源 代码 安全 检查 


根据 所 讨论 应 用 程序 的 敏感 程度 ,实施 对 应 用 程序 源 代码 的 安全 审核 可 能 是 明智 的 。 
不 要 将 源 代码 审核 与 代码 检查 相 混 淆 。 标 准 代 码 检 查 的 目的 是 识别 影响 代码 功能 的 一 般 
代码 缺陷 。 源 代码 安全 检查 的 目的 则 是 识别 有 意 或 无 意 的 安全 性 缺陷 。 开 发 处 理财 政事 
务 或 提供 公共 安全 的 应 用 程序 时 尤其 应 保证 进行 这 种 检查 。 
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emitira БЕ 


3. 验证 应 急 计 划 


总 是 存在 应 用 程序 的 安全 防御 被 突破 的 潜在 可 能 ,只 有 应 急 计划 就 位 并 有 效 才 是 明 
智 的 。 在 应 用 程序 服务 器 或 数据 中 心 检测 到 病毒 时 将 采取 哪些 步骤 ? 安全 性 被 越过 时 ， 
必须 迅速 作出 反应 来 防止 进一步 损坏 。 在 应 急 计划 投入 实战 以 前 请 弄 清 它们 是 否 起 
作用 。 


4. 攻击 您 的 应 用 程序 


测试 人 员 习 惯 于 攻击 应 用 程序 以 试图 使 其 失败 。 攻 击 自己 的 应 用 程序 是 与 其 类 似 但 
目的 更 集中 的 过 程 。 尝 试 攻 击 应 用 程序 时 ,应 寻找 代表 应 用 程序 防御 弱点 的 、 可 利用 的 
缺陷 。 


7.3.2 安全 性 测试 的 主要 内 容 


1. 安全 性 测试 手段 


测试 者 扮演 一 个 试图 攻击 系统 的 角色 ,具体 的 测试 手段 有 : 
(1) 尝试 通过 外 部 的 手段 来 获取 系统 的 密码 。 

(2) 使 用 能 够 瓦解 任何 防护 的 客户 软件 来 攻击 系统 。 

(3) 把 系统 “制服 ”, 使 别人 无 法 访问 。 

(4) 有 目的 地 引发 系统 错误 ,期 望 在 系统 恢复 过 程 中 侵入 系统 。 
(5) 通过 浏览 非 保密 的 数据 ,从 中 找到 进入 系统 的 钥匙 等 。 


2. 安全 性 测试 层次 


安全 性 一 般 分 为 以 下 两 个 层次 。 

(1) 应 用 程序 级 别 的 安全 性 : 包括 对 数据 或 业务 功能 的 访问 .系统 级 别 的 安全 性 等 。 

(2) 系统 级 别 的 安全 性 : 对 系统 的 登录 或 远程 访问 。 

二 者 的 关系 : 应 用 程序 级 别 的 安全 性 可 确保 在 预期 的 安全 性 情况 下 ,操作 者 只 能 访 
问 特定 的 功能 或 用 例 , 或 者 只 能 访问 有 限 的 数据 。 例 如 , 某 财务 系统 可 能 会 允许 所 有 人 输 
入 数据 ,创建 新 账户 ,但 只 有 管理 员 才 能 删除 这 些 数据 或 账户 。 此 外 ,系统 级 别 的 安全 性 
对 确保 只 有 具备 系统 访问 权限 的 用 户 才能 访问 应 用 程序 ,而 且 只 能 通过 相应 的 入 口 来 
访问 。 

з. 安全 性 测试 标准 

1) 安全 目标 

预防 : 对 有 可 能 被 攻击 的 部 分 采取 必要 的 保护 措施 ,如 密码 验证 等 。 

监控 : 能 够 对 针对 软件 或 数据 库 的 实时 操作 进行 监控 ,并 对 越权 行为 或 危险 行为 发 
出 警报 信息 。 
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保密 性 和 机 密 性 : 可 防止 非 授权 用 户 的 侵入 和 机 密 信 息 的 泄露 。 

多 级 安全 性 : 指 多 级 安全 关系 数据 库 在 单一 数据 库 系统 中 存储 和 管理 不 同 敏感 性 的 
数据 ,同时 通过 自主 访问 控制 和 强制 访问 控制 机 制 保持 数据 的 安全 性 。 

匿名 性 : 防止 匿名 登录 。 

2) 安全 的 原则 

加 固 最 薄弱 的 连接 : 进行 风险 分 析 并 提交 报告 ,加 固 其 薄弱 环节 。 

实行 深度 防护 : 利用 分 散 的 防护 策略 来 管理 风险 。 

失败 安全 : 在 系统 运行 失败 时 有 相应 的 措施 保障 软件 安全 。 

分 割 : 将 系统 尽 可 能 分 割 成 小 单元 ,隔离 那些 有 安全 特权 的 代码 。 

保密 性 : 避免 滥用 用 户 的 保密 信息 。 

3) 密码 学 的 应 用 

密码 学 的 目标 : 机 密 性 ,完整 性 、 可 鉴别 性 \ 抗 抵赖 性 。 

密码 算法 : 考虑 算法 的 基本 功能 、 强 度 、 弱 点 及 密 钥 长 度 的 影响 。 

密 钥 管理 : 生成 .分 发 , 校 验 ,撤销 破坏、 存储 恢复、 生存 期 和 完整 性 。 

4) 缓冲 区 溢出 

防止 内 部 缓冲 区 溢出 的 实现 ,防止 输入 溢出 的 实现 ,防止 堆 和 堆栈 溢出 的 实现 。 

5) 信任 管理 和 输入 的 有 效 性 

信任 的 可 传递 ,防止 恶意 访问 、 安 全 调用 程序 、 网 页 安全 、 客 户 端 安全 格式 串 攻击 。 

6) 客户 端 安 全 性 

版 权 保护 机 制 、 防 自 改 技术 .代码 迷惑 技术 程序 加 密 技 术 。 

7) 口令 认证 

口令 的 存储 添加 用 户 .口令 认证 .选择 口令 ,数据库 安全 性 .访问 控制 .保护 域 、. 抵 抗 
统计 攻击 。 


7.3.3 安全 性 测试 方法 


1. 漏洞 扫描 


安全 漏洞 扫描 通常 都 是 借助 于 特定 的 漏洞 扫描 器 完成 。 漏 洞 扫描 器 是 一 种 能 自动 检 
测 远 程 或 本 地 主机 安全 性 弱点 的 程序 ,通过 使 用 漏洞 扫描 器 ,系统 管理 员 能 够 发 现 所 维护 
信息 系统 存在 的 安全 漏洞 ,从 而 在 信息 系统 网 络 安全 防护 过 程 中 做 到 有 的 放 矢 ,及 时 修补 
漏洞 。 安 全 漏洞 扫描 是 可 以 用 于 日 常安 全 防护 ,同时 可 以 作为 对 软件 产品 或 信息 系统 进 
行 测试 的 手段 ,可 以 在 安全 漏洞 造成 严重 危害 前 发 现 漏洞 并 加 以 防范 。 

一 般 可 以 将 漏洞 扫描 器 分 为 以 下 两 种 类 型 。 

(1) 主机 漏洞 扫描 器 : 是 指 在 系统 本 地 运行 检测 系统 漏洞 的 程序 。 

(2) 网 络 漏洞 扫描 器 : 是 指 基 于 网 络 远 程 检测 目标 网 络 和 主机 系统 漏洞 的 程序 。 


2. 功能 验证 
功能 验证 是 采用 软件 测试 当中 的 黑 盒 测试 方法 ,对 涉及 安全 的 软件 功能 ,如 用 户 管理 
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模块 ,权限 管理 模块 ,加密 系统 .认证 系统 等 进行 测试 ,主要 是 验证 上 述 功能 是 否 有 效 。 
功能 性 的 安全 性 问题 包括 : 
(1) 没有 口令 是 否 可 以 登录 到 系统 中 ? 
(2) 有 效 的 口令 是 否 被 接受 ,无 效 的 口令 是 否 被 拒绝 ? 
(3) 系统 对 多 次 无 效 口令 是 否 有 适当 的 反应 ? 
са) 无 效 的 或 者 不 可 能 的 参数 是 否 被 检测 并 且 适 当 处 理 ? 
(5) 无 效 的 或 者 超出 范围 的 指令 是 否 被 检测 并 且 适 当 处 理 ? 
(6) 错误 和 文件 访问 是 否 适当 被 记录 ? 
(7) 系统 配置 数据 是 否 能 正确 保存 ,系统 故障 时 是 否 能 恢复 ? 
(8) 系统 配置 数据 能 否 导出 ,在 其 他 机 器 上 进行 备份 ? 
O) 系统 配置 数据 能 否 导入 ,导入 后 能 否 正常 使 用 ? 
(10) 系统 配置 数据 保存 时 是 否 加 密 ? 
(11) 系统 初始 的 权限 功能 是 否 正确 ? 
(12) 防火 墙 是 否 能 被 激活 和 取消 激活 ? 
аз» 防火 墙 功能 激活 后 是 否 会 引起 其 他 问题 ? 
(14) 各 级 用 户 权限 划分 是 否 合理 ? 
(15) 登录 用 户 修改 其 他 用 户 的 参数 是 否 会 立即 生效 ? 
(16) 系统 在 最 大 用 户 数量 时 是 否 操作 正常 ? 
(17) 对 于 远 端 操作 是 否 有 安全 方面 的 特性 ? 
(18) 用 户 的 生命 期 是 否 有 限制 ? 
(19) 低级 别 的 用 户 是 否 可 以 操作 高 级 别 用 户 命令 ? 
(20) 高 级 别 的 用 户 是 否 可 以 操作 低级 别 用 户 命令 ? 
CD 用 户 是 否 会 自动 超时 退出 ,超时 的 时 间 是 否 设置 合理 ,用 户 数据 是 否 会 丢失 ? 


3. 模拟 攻击 


模拟 攻击 试验 是 一 组 特殊 的 黑 盒 测试 案例 ,通常 以 模拟 攻击 来 验证 软件 或 信息 系统 
的 安全 防护 能 力 , 包 括 冒 充 、 重 演 , 消 息 自 改 ,口令 猜测 ,拒绝 服务 ,陷阱 木马、 内 部 攻击 和 
外 部 攻击 等 。 

1) 重演 

当 一 个 消息 或 部 分 消息 为 了 产生 非 授 权 效 果 而 被 重复 时 ,就 出 现 了 重演 。 

例如 ,一 个 含有 鉴别 信息 的 有 效 消息 可 能 被 另 一 个 实体 所 重演 ,目的 是 鉴别 它 自己 。 

2) НЕЯ 

DNS 高 速 缓存 污染 : 由 于 DNS 服务 器 与 其 他 名 称 服务 器 交换 信息 的 时 候 并 不 进行 
身份 验证 ,这 就 使 黑客 可 以 加 入 不 正确 的 信息 ,并 把 用 户 引 向 黑客 自己 的 主机 。 

伪造 电子 邮件 : 由 于 SMTP 并 不 对 邮件 发 送 附 件 的 身份 进行 鉴定 ,因此 黑客 可 以 对 
内 部 客户 伪造 电子 邮件 ,声称 是 来 自 某 个 客户 认识 并 相信 的 人 ,并 附 上 可 安装 的 特洛伊 木 
马 程序 ,或 者 是 一 个 指向 恶意 网 站 的 链接 。 
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3) 口令 猜测 

一 旦 黑客 识别 了 一 台 主 机 ,而 且 发 现 了 基于 NetBIOS, Telnet 或 NFS 服务 的 可 利用 
的 用 户 账号 ,并 成 功 地 猜测 出 口令 ,就 能 对 机 器 进行 控制 。 

4) 拒绝 服务 

当 一 个 实体 不 能 执行 它 的 正常 功能 ,或 它 的 动作 妨碍 了 别 的 实体 执行 它们 的 正常 功 
能 的 时 候 , 便 发 生 服务 拒绝 。 

5) 陷阱 

当 系 统 的 实体 受到 改变 ,致使 一 个 攻击 者 能 对 命令 或 对 预定 的 事件 或 事件 序列 产生 
非 授权 的 影响 时 ,其 结果 就 称 为 陷阱 门 。 

例如 ,口令 的 有 效 性 可 能 被 修改 ,使 其 除了 正常 效力 之 外 也 使 攻击 者 的 口令 生效 。 

6) 木马 

对 系统 而 言 的 特洛伊 木马 ,是 指 它 不 但 具有 自己 的 授权 功能 ,而 且 还 有 非 授权 功能 。 

7) 内 部 攻击 

当 系 统 的 合法 用 户 以 非 故 意 或 非 授权 方式 进行 动作 时 就 成 为 内 部 攻击 。 防 止 内 部 攻 
击 的 保护 方法 有 : 

(1) 所 有 管理 数据 流 进行 加 密 。 

(2) 利用 包括 使 用 强 口令 在 内 的 多 级 控制 机 制 和 集中 管理 机 制 来 加 强 系统 的 控制 
能 力 。 

(3) 利用 防火 墙 为 进出 网 络 的 用 户 提供 认证 功能 ,提供 访问 控制 保护 。 

(4) 使 用 安全 日 志 记录 网 络 管理 数据 流 等 。 

8) 外 部 攻击 

外 部 攻击 可 以 使 用 的 办 法 有 : 

(1) 搭 线 窃听 。 

(2) 截取 辐射 。 

(3) 冒充 为 系统 的 授权 用 户 。 

(4) 冒充 为 系统 的 组 成 部 分 。 

9) SQL 注入 

SQL 注入 (SQL Injection) 攻击 是 黑客 对 数据 库 进 行 攻 击 的 常用 手段 之 一 。 随 着 
B/S 模式 应 用 开发 的 发 展 , 使 用 这 种 模式 编写 应 用 程序 的 程序 员 也 越 来 越 多 。 但 是 由 于 
程序 员 的 水 平 及 经 验 也 参差 不 齐 , 相 当 大 一 部 分 程序 员 在 编写 代码 的 时 候 , 没 有 对 用 户 输 
入 数据 的 合法 性 进行 判断 ,使 应 用 程序 存在 安全 隐患 。 用 户 可 以 提交 一 段 数据 库 查 询 代 
码 ,根据 程序 返回 的 结果 ,获得 某 些 自己 想 得 知 的 数据 。 

例如 ,如 果 用 户 通过 某 种 途径 知道 或 是 猜测 出 验证 SQL 语句 的 逻辑 ,他 就 有 可 能 在 
表单 中 输入 特殊 字符 改变 SQL 原 有 的 逻辑 。 


select % from table where name=" "or "1"= "1"апа pswd=" " 


ог 和 “ ”的 加 入 使 得 where 后 的 条 件 始 终 是 真 ,这 样 原 有 的 验证 就 完全 无 效 了 。 
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4. 安全 性 测试 用 例 的 参考 模板 
安全 性 测试 需要 测试 人 员 有 足够 的 能 力 去 分 析 系 统 的 安全 隐患 ,设计 一 个 好 的 参考 
模板 可 以 帮助 你 实现 目标 。 安 全 性 测试 用 例 的 参考 模板 如 表 7-4 所 示 。 
表 7-4 安全 性 测试 用 例 参考 模板 
假想 目标 A 
前 提 条 件 
非法 入 侵 手段 是 否 实现 目标 代价 一 利益 分 析 


7.4 恢复 测试 


一 般 来 说 ,许多 基于 计算 机 的 软件 系统 必须 在 一 定 的 时 间 内 从 错误 中 恢复 过 来 ,然后 
继续 运行 。 也 就 是 说 在 某 些 情况 下 ,一 个 软件 系统 应 该 是 在 运行 过 程 中 出 现 错误 时 能 自 
动 或 人 工 进 行 恢复 ,不 能 使 整个 系统 的 功能 都 停止 运作 ,否则 就 会 造成 严重 损失 。 因 此 ， 
软件 可 恢复 失败 包括 两 个 方面 : 一 是 软件 系统 没有 自动 的 恢复 到 原来 的 性 能 ,这 意味 着 
恢复 需要 人 工 干预 ;二 是 即使 是 人 工 干预 后 ,也 不 能 恢复 到 原来 设计 性 能 ,例如 软件 所 涉 
及 的 数据 出 现 某 种 程度 的 损坏 或 丢失 。 


7.4.1 恢复 测试 的 含义 


目前 ,对 高 可 靠 性 软件 测试 特别 是 可 恢复 测试 方案 ,许多 测试 人 员 还 缺乏 真正 的 认 
识 。 因 此 ,对 需要 高 可 恢复 的 软件 如 何 实施 可 恢复 测试 ,在 技术 和 经 验 上 仍 是 一 个 颇 不 成 
熟 的 领域 。 随 着 软件 系统 应 用 环境 的 复杂 性 ,软件 出 错 的 几率 越 来 越 大 了 ,软件 面临 着 一 
个 非常 关键 的 需求 就 是 在 系统 出 错 后 能 进行 恢复 。 目 前 用 户 最 大 的 抱怨 是 很 多 系统 缺少 
自动 恢复 功能 ,出 现 错误 后 许多 的 恢复 过 程 都 要 人 工 干预 来 完成 ,说 明 恢 复 测 试 仍然 很 不 
成 熟 ,需要 特别 加 强 。 


1. 恢复 测试 的 定义 


恢复 测试 (Recovery Testing) 是 指 采取 各 种 人 工 干 预 方式 强制 性 地 使 软件 出 错 ,使 其 
不 能 正常 工作 ,进而 检验 系统 的 恢复 能 力 。 人 恢复 测试 通过 测试 一 个 系统 从 如 下 灾难 中 能 
和 否 很 好 地 恢复 ,如 遇 到 系统 崩溃 、 硬 件 损坏 或 其 他 灾难 性 问题 。 恢 复 测试 时 通过 人 为 地 让 
软件 (或 者 硬件 ) 出 现 故障 来 检测 系统 是 否 能 正确 恢复 ,通常 关注 恢复 所 需 的 时 间 以 及 恢 
复 的 程度 。 

恢复 测试 通常 需要 关注 恢复 所 需 的 时 间 以 及 恢复 的 程度 。 恢 复 测 试 主要 检查 系统 的 
容错 能 力 。 当 系统 出 错时 ,能 和 否 在 指定 时 间 间 隔 内 修正 错误 并 重新 启动 系统 。 人 恢复 测试 
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系统 测试 


首先 要 采用 各 种 办 法 强迫 系统 失败 ,然后 验证 系统 是 否 能 尽快 恢复 。 对 于 自动 恢复 需 验 
证 重新 初始 化 .检查 点 .数据 恢复 和 重新 启动 等 机 制 的 正确 性 ;对 于 人 工 干 预 的 恢复 系统 ， 
还 需 估 测 平均 修复 时 间 ,确定 其 是 否 在 可 接受 的 范围 内 。 

随 着 网 络 应 用 .电子 商务 .电子 政务 越 来 越 普 及 ,系统 恢复 性 也 显得 越 来 越 重 要 ,恢复 
性 对 系统 的 稳定 性 .可靠 性 影响 很 大 。 但 恢复 测试 很 容易 被 忽视 ,因为 恢复 测试 相对 来 说 
是 比较 难 的 ,一 般 情况 下 是 很 难 设想 得 出 来 让 系统 出 错 和 发 生 灾难 性 的 错误 ,这 需要 足够 
的 时 间 和 精力 ,也 需要 得 到 更 多 的 设计 人 员 、 开 发 人 员 的 参与 。 


2. 容错 测试 与 恢复 测试 的 区 别 


容错 测试 一 般 是 输入 异常 数据 或 进行 异常 操作 ,以 检验 系统 的 保护 性 。 如 果 系 统 的 
容错 性 好 的 话 , 系 统 会 给 出 提示 或 内 部 消化 掉 , 而 不 会 导致 系统 出 错 甚 至 崩溃 。 而 恢复 测 
试 是 通过 各 种 手段 ,让 软件 强制 性 地 发 生 故 障 , 然 后 验证 系统 已 保存 的 用 户 数据 是 否 丢 
失 、 系 统 和 数据 是 否 能 很 快 恢 复 。 因 此 ,恢复 测试 和 容错 测试 是 互补 的 关系 ,恢复 测试 也 
是 检查 系统 的 容错 能 力 的 方法 之 一 ,但 不 能 只 重视 其 中 之 一 而 忽略 其 他 。 


3. 故障 转移 测试 和 恢复 测试 的 关系 


故障 转移 测试 (Failover) 指 当主 机 软 硬 件 发 生 灾难 时 候 , 备 份 机 器 是 否 能 够 正常 启 
动 , 使 系统 可 以 正常 运行 ,这 对 于 电信 ,银行 等 领域 的 软件 是 十 分 重要 的 。 因 此 ,故障 转移 
是 确保 测试 对 象 在 出 现 故障 时 ,能 成 功 地 将 运行 的 系统 或 系统 某 一 关键 部 分 转移 到 其 他 
设备 上 继续 运行 , 即 备 用 系统 将 不 失 时 机 地 “顶替 ”发 生 故 障 的 系统 ,以 避免 丢失 任何 数据 
或 事务 ,不 影响 用 户 的 使 用 。 

故障 转移 测试 和 恢复 测试 也 是 一 种 互补 关系 的 测试 ,它们 共同 可 确保 测试 对 象 能 成 
功 完成 故障 转移 ,并 能 从 导致 意外 数据 损失 或 数据 完整 性 破坏 的 各 种 硬件 ,软件 或 网 络 故 
障 中 恢复 。 因 此 ,它们 两 者 的 关系 一 个 是 测试 备用 系统 能 否 及 时 工作 , 另 一 个 是 测试 系统 
能 否 恢 复 到 正确 运行 状态 。 


7.4.2 恢复 测试 的 主要 内 容 和 步骤 


1. 恢复 测试 的 基本 内 容 


通过 恢复 测试 ,一 方面 使 系统 具有 异常 情况 的 抵抗 能 力 , 另 一 方面 使 系统 测试 质量 可 
控制 。 因 此 ,恢复 测试 包括 以 下 几 种 情况 。 

D 硬件 及 有 关 设 备 故障 

测试 对 于 硬件 及 设备 故障 是 否 具有 有 效 的 保护 及 恢复 能 力 ,系统 是 否 具有 诊断 ,故障 
报告 及 指示 处 理 方法 的 能 力 ,是否 具 备 元 余 及 自动 切换 能 力 ,故障 诊断 方法 是 否 合理 和 及 
时 。 例 如 ,设备 掉 电 后 的 可 恢复 程度 。 
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2) 软件 系统 故障 

测试 系统 的 程序 及 数据 是 否 有 足够 可 靠 的 备份 措施 ,在 系统 遭 破坏 后 是 否 具有 重新 
恢复 正常 工作 的 能 力 , 对 系统 故障 是 否 自动 检测 和 诊断 的 功能 。 故 障 发 生 时 ,是 否 能 对 操 
作 人 员 发 出 完整 的 提示 信息 和 指示 处 理 方法 能 力 ,是 否 具 有 自动 隔离 局 部 故障 ,进行 系统 
重组 和 降级 使 用 使 系统 不 中 断 运行 。 还 有 , 若 系 统 局 部 故障 可 否 在 系统 不 中 断 的 情况 下 
运行 。 以 及 在 异常 情况 时 是 否 具有 记录 故障 前 后 的 状态 、 搜 集 有 用 信息 的 能 力 。 

3) 数据 和 通信 故障 

是 测试 数据 处 理 周期 未 完成 时 的 恢复 程度 ,例如 数据 交换 或 同步 进程 被 中 断 ,异常 终 
止 或 提前 终止 的 数据 库 进 程 ,其 后 有 没有 操作 异常 等 情况 。 测 试 有 没有 纠正 通信 传输 错 
误 的 措施 ,有 没有 恢复 到 与 其 他 系统 通信 发 生 故 障 前 原状 的 措施 。 


2. 恢复 测试 的 基本 流程 


(1) 需要 制定 恢复 测试 计划 ,并 准备 好 可 恢复 测试 用 例 和 恢复 测试 规程 。 

(2) 进行 软件 可 恢复 测试 。 在 此 过 程 中 ,要 用 文档 记录 好 在 恢复 性 测试 期 间 所 出 现 
的 问题 并 跟踪 直到 结束 。 

(3) 将 可 恢复 测试 结果 写成 文档 ,说 明 测试 所 揭露 的 软件 能 力 、 缺 陷 和 不 足 , 以 及 可 
能 给 软件 运行 带 来 的 影响 。 

(4) 说 明 能 否 通过 测试 和 测试 结论 ,并 提交 恢复 测试 分 析 报 告 。 


7.43 ”恢复 测试 中 一 些 要 注意 的 地 方 


恢复 测试 中 有 一 些 要 注意 的 地 方 : 
1. 对 恢复 测试 给 予 足 够 的 重视 和 关注 


目前 ,许多 测试 人 员 还 缺乏 足够 的 重视 和 关注 。 例 如 ,许多 测试 人 员 认 为 只 要 有 制定 
恢复 测试 方案 ,有 获得 所 需 的 硬件 和 软件 ,配置 了 系统 ,然后 也 有 测试 故障 转移 和 灾难 恢 
复 响应 系统 ,一 切 按照 预期 计划 进行 就 行 了 。 但 是 大 多 数 的 测试 人 员 只 会 在 常规 环境 下 
进行 恢复 测试 ,并 没有 想 尽 一 切 可 能 的 办 法 在 更 多 的 不 同 环境 下 的 进行 恢复 测试 ,结果 是 
他 们 并 没有 确保 自己 进行 了 足够 的 恢复 测试 。 


2. 制定 明确 的 测试 计划 和 测试 制度 


如 果 没 有 制定 明确 的 测试 计划 和 需要 遵循 的 测试 制度 ,那么 测试 就 会 数 衍 了 事 , 根 本 
无 法 满足 可 恢复 测试 的 要 求 。 那 么 完成 测试 目标 也 成 了 空中 楼 阁 。 


3. 确保 测试 过 程 和 文档 的 一 致 性 


恢复 测试 应 包括 程序 不 同 环境 下 的 表现 书面 需求 分 析 文 档 、 联 机 帮助 .界面 资源 等 。 
因此 , 当 进 行 恢复 测试 活动 时 ,应 确保 测试 手册 、 联 机 帮助 ,测试 分 析 报告 和 应 用 程序 测试 
需求 的 完整 性 和 一 致 性 。 
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4. 最 好 用 真实 数据 进行 测试 


用 真实 数据 进行 真实 测试 是 可 恢复 测试 中 最 棘手 的 部 分 。 因 为 在 没有 用 真实 数据 测 
试 的 时 候 , 就 很 难 评价 系统 进行 可 恢复 或 故障 转移 过 程 中 的 各 种 技术 指标 的 有 效 性 。 用 
真实 数据 进行 测试 往往 会 得 到 让 人 意 想 不 道 的 结果 。 


7.5 备份 测试 


备份 测试 是 恢复 性 测试 的 一 个 补充 ,也 可 以 说 是 恢复 性 测试 的 一 个 部 分 。 备 份 测试 
的 目的 是 验证 系统 在 软件 或 者 硬件 失败 时 备份 数据 的 能 力 。 

备份 测试 需要 从 以 下 几 个 角度 进行 设计 : 

(1) 备份 文件 。 

(2) 存储 文件 和 数据 。 

(3) 完善 系统 备份 工作 的 过 程 。 

(4) 检查 点 数据 备份 。 

(5) 备份 引起 系统 性 能 衰减 或 降低 。 

(6) 手工 备份 工作 的 有 效 性 。 

(7) 备份 期 间 的 安全 性 。 

(8) 备份 处 理 日 志 的 完整 性 。 


7.6 可 用 性 测试 


可 用 性 测试 时 测试 人 员 为 用 户 提 供 一 系列 操作 场景 和 任务 让 他 们 去 完成 ,这 些 场 景 
和 任务 与 产品 或 服务 密切 相关 。 通 过 观察 来 发 现 完成 过 程 中 出 现 了 什么 问题 ,用 户 喜欢 
或 不 喜欢 哪些 功能 和 操作 方式 ,原因 是 什么 ?并 针对 问题 所 在 提出 改进 的 建议 。 


7.6.1 可 用 性 测试 概述 


可 用 性 测试 (Usability Testing) 是 指 选取 有 代表 性 的 用 户 尝试 对 产品 进行 典型 操作 ， 
同时 观察 员 和 开发 人 员 在 一 旁观 察 、 聆 听 、 做 记录 ,用 来 改善 易 用 性 的 一 系列 方法 。 该 产 
品 可 能 是 一 个 网 站 、 软 件 或 者 其 他 任何 产品 , 它 可 能 尚未 成 型 。 

ISO/IEC 9126-1 将 可 用 性 定义 为 “在 特定 使 用 情景 下 ,软件 产品 能 够 被 用 户 理解 、 学 
习 、 使 用 ,能 够 吸引 用 户 的 能 力 ”。ISOVIEC 9126-1 阐述 了 在 产品 开发 过 程 中 软件 质量 的 
六 个 方面 ,依次 为 功能 性 (functionality) 、 可 靠 性 (reliability)、 可 用 性 (usability)、 有 效 性 
(efficiency) „HE p7 YE (maintainability) 、 移 植 性 (portability)。ISO/IEC 9126-1 将 “使 用 质 
量 (Quality іп use)” 作 为 广义 的 目标 : 满足 目标 用 户 和 支持 用 户 的 使 用 质量 ,功能 性 、 可 
靠 性 有效 性 和 可 用 性 决定 着 目标 用 户 在 特定 情景 中 的 使 用 质量 ,支持 用 户 则 关心 维护 性 
和 移植 性 方面 的 质量 。 目 前 ISO/IEC 9126-1 有 两 个 作用 ,一 是 作为 具体 软件 设计 活动 的 
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一 部 分 (可 用 人 性 定义 ) ,二 是 提供 软件 满足 用 户 需 求 的 最 终 目标 。 
国际 标准 ISO 9241-11 将 可 用 性 定义 为 “特定 的 用 户 在 特定 的 使 用 情景 下 ,有 效 、 有 
效率 、 满 意 的 使 用 产品 达到 特定 的 目标 ”。 


7.6.2 可 用 性 测试 的 发 展 


可 用 性 最 早 来 源 于 人 因 工 程 (Human Factors)。 人 因 工 程 又 称 工 效 学 (Ergonomics)， 
起 源 于 二 战 时 期 ,设计 人 员 研 发 新 式 武 器 时 研究 如 何 使 用 机 器 、 人 的 能 力 限 度 和 特性 ,从 
而 诞生 了 工效 学 ,这 是 一 门 涉及 多 个 领域 的 学 科 , 包 括 心理 学 、 人 体 测量 学 \ 环 境 医学 、 工 
程 学 ,统计 学 、 工 业 设计 、 计 算 机 等 。 

第 一 次 有 记录 的 可 用 性 测试 出 现在 1981 年 。 当 时 施乐 公司 下 属 的 帕 罗 奥 多 研究 中 
心 的 一 个 员工 记录 了 该 公司 在 Xerox Star 工作 站 的 开发 过 程 中 引入 了 可 用 性 测试 的 经 
过 。 不 过 由 于 一 共 只 有 大 约 25 000 套 左右 的 销售 成 绩 ,Xerox Star 系统 被 认为 是 一 个 商 
业 失 败 案例 。 

1984 年 ,美国 财务 软件 公司 Intuit Inc. 在 其 个 人 财务 管理 软件 Quicken 的 开发 过 程 
中 引入 了 可 用 性 测试 的 环节 。Suzanne Е. Taylor 在 其 2003 年 的 业界 畅销 书 “Inside 
Intuit” 中 提 到 “在 第 一 次 可 用 性 测试 实例 中 ,该 做 法 后 来 已 成 为 行业 惯例 ,LeFevre 从 街 
上 召集 了 一 些 人 来 同时 试用 Quicken 进行 测试 ,每 次 测试 之 后 程序 设计 师 都 能 够 对 软件 
加 以 改进 ”。 该 公司 的 创立 者 之 一 的 Scott Соок 也 曾经 表示 “我 们 在 1984 年 做 了 可 用 性 
测试 , 比 其 他 的 人 早 了 5 年 的 时 间 。 进 行 可 用 性 测试 和 在 已 售 人 群 中 进行 可 用 性 测试 是 
不 大 一 样 的 ,而 且 例行公事 地 去 进行 和 把 它 作为 核心 设计 流程 中 的 一 环 也 是 很 不 一 
样 的 ”。 

经 过 多 年 的 发 展 和 应 用 ,可 用 性 测试 已 经 成 为 产品 设计 开发 和 改进 维护 各 个 阶段 必 
不 可 少 的 重要 环节 。 它 的 价值 在 于 初期 及 早 地 发 现 产品 中 可 能 会 存在 的 问题 ,在 开发 或 
投产 之 前 提供 改进 方案 ,从 而 节约 设计 开发 成 本 。 而 在 产品 的 销售 疲软 或 是 使 用 过 程 中 
出 现 问题 却 无 法 及 时 精确 地 找到 问题 关键 时 ,可 用 性 测试 可 以 在 很 大 程度 上 的 提高 解决 
问题 的 效率 。 


7.6.3 可 用 性 测试 方法 


所 谓 可 用 性 评估 , 即 是 对 软件 的 可 用 性 进行 评估 ,检验 其 是 否 达到 可 用 性 标准 。 按 照 
参与 可 用 性 评估 的 人 员 划 分 ,可 以 分 为 专家 评估 和 用 户 评估 ;按照 评估 所 处 于 的 软件 开发 
阶段 ,可 以 将 可 用 性 评估 划分 为 形成 性 评估 和 总 结 性 评估 。 形 成 性 评估 是 指 在 软件 开发 
或 改进 过 程 中 ,请 用 户 对 产品 或 原型 进行 测试 ,通过 测试 后 收集 的 数据 来 改进 产品 或 设计 
直至 达到 所 要 求 的 可 用 性 目标 。 形 成 性 评估 的 目标 是 发 现 尽 可 能 多 的 可 用 人 性 问题 ,通过 
修复 可 用 性 问题 实现 软件 可 用 性 的 提高 ,总 结 性 评估 的 目的 是 横向 评估 多 个 版 本 或 者 多 
个 产品 ,输出 评估 数据 进行 对 比 。 
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1. 认 知 预演 


认 知 预演 (Cognitive Walkthroughs) 是 由 Wharton 提出 ,该 方法 首先 要 定义 目标 用 
户 ,代表 性 的 测试 任务 、 每 个 任务 正确 的 行动 顺序 、 用 户 界面 ,然后 进行 行动 预演 并 不 断 地 
提出 问题 ,包括 用 户 能 否 建立 达到 任务 目的 ,用 户 能 否 获得 有 效 的 行动 计划 ,用 户 能 否 采 
用 适当 的 操作 步骤 ,用 户 能 否 根据 系统 的 反馈 信息 评价 是 否 完 成 任务 ,最 后 进行 评论 , 诸 
如 要 达到 什么 效果 , 某 个 行动 是 否 有 效 , 某 个 行动 是 否 恰当 , 某 个 状况 是 否 良好 。 该 方法 
优点 在 于 能 够 使 用 任何 低 保 真 原型 ,包括 纸 原型 。 该 方法 缺点 在 于 : 评价 人 不 是 真实 的 
用 户 ,不 能 很 好 地 代表 用 户 。 


2. 启发 式 评估 


启发 式 评估 (Heuristic Evaluation) 由 Nielsen 和 Molich 提出 ,由 多 位 评价 人 (通常 4 
至 6 人 ) 根 据 可 用 性 原则 反复 浏览 系统 各 个 界面 ,独立 评估 系统 ,允许 各 位 评价 人 在 独立 
完成 评估 之 后 讨论 各 自 的 发 现 , 共 同 找 出 可 用 性 问题 。 该 方法 的 优点 在 于 专家 决断 比较 
快 .使 用 资源 少 ,能 够 提供 综合 评价 ,评价 机 动 性 好 ,但 是 也 存在 不 足 之 处 : 一 是 会 受到 专 
家 的 主观 影响 ,二 是 没有 规定 任务 ,会 造成 专家 评估 的 不 一 致 ,三 是 评价 后 期 阶段 由 于 评 
价 人 的 原因 造成 信 度 降低 ,四 是 专家 评估 与 用 户 的 期 待 存在 差距 ,所 发 现 的 问题 仅 能 代表 
专家 的 意思 。 


3. 用 户 测试 法 


用 户 测试 法 (User Testing) 就 是 让 用 户 真正 地 使 用 软件 系统 ,由 实验 人 员 对 实验 过 
程 进行 观察 ,记录 和 测量 。 这 种 方法 可 以 准确 地 反馈 用 户 的 使 用 表现 .反映 用 户 的 需求 ， 
是 一 种 非常 有 效 的 方法 。 用 户 测 试 可 分 为 实验 室 测试 和 现场 测试 。 实 验 室 测 试 是 在 可 用 
性 测试 实验 室 里 进行 的 ,而 现场 测试 是 由 可 用 性 测试 人 员 到 用 户 的 实际 使 用 现场 进行 观 
察 和 测试 。 用 户 测 试 之 后 评估 人 员 需 要 汇编 和 总 结 测试 中 获得 的 数据 ,例如 完成 时 间 的 
平均 值 . 中 间 值 .范围 和 标准 偏差 ,用 户 成 功 完成 任务 的 百分比 ,对 于 单个 交互 ,用 户 做 出 
各 种 不 同 倾向 性 悬 着 的 直方 图 表示 等 。 然 后 对 数据 进行 分 析 , 并 根据 问题 的 严重 程度 和 
紧急 程度 排序 撰写 最 终 测试 报告 。 

可 用 性 测试 的 文档 主要 包括 : 

(1) 日 程 安排 文档 。 

(2) 用 户 背 景 资料 文档 。 

(3) 用 户 协 议 。 

(4) 测试 脚本 。 

(5) 测试 前 问卷 。 

(6) 测试 后 问卷 。 

(7) 任务 卡片 。 
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(8) 测试 过 程 检查 文档 。 

(9) 过 程 记 录 文 档 。 

(10) 测试 报告 。 

aD 影音 资料 。 

测试 人 员 应 当 关 注 的 可 用 性 问题 包括 : 

(1) 困难 的 安装 过 程 。 

(2) 非 标准 的 GUI 接口 。 

(3) 难以 登录 。 

(4) 过 分 复杂 的 功能 或 者 指令 。 

(5) 错误 信息 过 于 简单 ,例如 “系统 错误 ”。 
(6) 语法 难于 理解 和 使 用 。 

(7) 用 户 被 迫 去 记 住 太 多 的 信息 。 

(8) 和 其 他 系统 之 间 的 连接 太 弱 。 

(9) 默认 不 够 清晰 。 

ао 接口 太 简单 或 者 太 复杂 。 

(11) 语法 ,格式 和 定义 不 一 致 。 

(12) 没有 给 用 户 提供 所 有 输入 的 清晰 的 认识 。 
(13) 帮助 文本 上 下 文 不 敏感 或 者 不 够 详细 。 


7.6.4 可 用 性 测试 的 必 备 要 素 


1. 直观 性 


直观 性 是 可 用 性 测试 首先 要 考虑 的 要 素 , 如 图 7-9 所 示 的 Microsoft 的 Windows H 
期 和 时 间 属 性 对 话 框 为 例 就 非常 直观 。 


日 期 和 时 间 属性 

时 间 和 日 期 | 时 区 | Internet 时 间 ] 
ARD) 

EY 2013 


172 
34567189 
10 11 12 13 14 15 16 
17 18 19 20 Ж 22 23 
24 25 26 27 28 29 30 


19: 1: 411% 


AD 
图 7-9 Windows 的 日 期 和 时 间 属 性 对 话 框 
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2. 灵活 性 


灵活 性 满足 用 户 灵活 选择 的 操作 。 图 7-10 所 示 的 Microsoft 的 Windows 的 计算 器 
程序 的 标准 型 和 科学 型 两 种 方式 转换 就 很 灵活 。 


编辑 下 ) 查看 WW) 帮助 00 


Otta отв 〇 八进制 〇 二 进 制 Оян Оя ORT 


Diyp (Ені (Мі Backspace 


) [sj[s 


RED SEV 帮助 00 


ln [ 5 G 


[ 2 3 
区 


ІН 7-10 Windows 的 计算 器 


3. 舒适 性 


舒适 性 主要 强调 界面 友好 、 美 观 ,如 操作 过 程 顺畅 色彩 运用 恰当 ,按钮 的 立体 感 以 及 
增加 动感 等 。 


4. 实用 性 


考量 每 一 个 具体 特性 对 软件 是 否 具有 实际 价值 ,是 否 有 助 于 用 户 的 实际 业务 需求 


5. 一 致 性 


一 致 性 是 一 个 关键 属性 。 软 件 操作 的 不 一 致 会 使 用 户 从 一 个 程序 转换 到 另 一 个 程序 
时 感到 不 习惯 ,当然 ,同一 个 程序 中 的 不 一 致 就 更 糟糕 了 。 


6. 正确 性 
正确 性 是 各 种 测试 都 应 该 考虑 的 事情 。 
7. 符合 标准 和 规范 


符合 标准 和 规范 是 软件 必须 做 到 的 事情 。 如 果 符 合 各 种 标准 和 规范 自然 会 符合 其 他 
要 素 。 
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7.6.5 可 用 性 测试 时 需要 注意 的 问题 


1. 测试 是 针对 产品 ,而 不 是 针对 人 


对 一 些 用 户 而 言 光 测试 ?有 负面 的 含义 。 要 努力 确保 用 户 不 认为 测试 是 针对 他 们 的 。 
要 让 用 户 明白 ,他们 正在 帮助 我 们 测试 原型 或 网 站 。 我 们 是 邀请 参加 者 为 我 们 提供 帮助 ， 
与 此 同时 还 应 该 思考 该 网 站 能 在 多 大 程度 上 符合 那些 典型 用 户 的 目标 ,而 不 是 关注 用 户 
在 这 个 任务 做 得 多 好 。 


2. 更 关注 用 户 的 表现 ,而 不 是 他 们 的 偏好 


通过 测试 我 们 可 以 测量 到 用 户 的 表现 ,以 及 他 们 的 偏好 。 用 户 的 表现 包括 是 否 成 功 
完成 .所 用 时 间 、 产 生 的 错误 等 。 偏 好 包括 用 户 自我 报告 的 满意 度 和 和 舒适 度 。 一 些 设计 人 
员 认 为 ,如 果 他 们 的 设计 能 迎合 用 户 的 喜好 ,用 户 在 该 网 站 上 就 会 有 良好 的 表现 。 但 证 据 
并 不 支持 这 一 点 。 事 实 上 ,用 户 的 表现 以 及 他 们 对 产品 的 偏好 并 非 一 一 对 应 。 


3. 基于 用 户 体验 , 找 出 问题 的 最 佳 解决 方法 


制造 任何 产品 ,包括 大 部 分 网 站 和 软件 ,需要 考虑 许多 不 同 的 用 户 的 工作 方式 .体验 、 
问题 以 及 需要 。 大 多 数 项 目 , 包 括 设计 或 修改 网 站 ,都 要 处 理 时 间 、 预 算 和 资源 等 方面 的 
限制 。 平衡 各 个 方面 对 大 部 分 项 目 来 说 都 是 一 个 重大 的 挑战 。 

要 注意 可 用 性 与 实用 性 的 区 别 。 可 用 性 是 指 产品 在 特定 使 用 环境 下 为 特定 用 户 用 于 
特定 用 途 时 所 具有 的 有 效 性 ` 效 率 和 用 户主 观 满意 度 。 有 效 性 是 用 户 完成 特定 任务 时 所 
具有 的 正确 和 完整 程度 ;效率 是 用 户 完成 任务 的 正确 完整 程度 与 所 用 资源 (如 时 间 ) 之 间 
的 比率 ;满意 度 是 用 户 在 使 用 产品 过 程 中 具有 的 主观 满意 和 接受 程度 。 可 用 性 体现 的 是 
用 户 在 使 用 过 程 中 所 实际 感受 到 的 产品 质量 ,即使 用 质量 ;而 实用 性 体现 的 是 产品 功能 ， 
即 产品 本 身 所 具有 的 功能 模块 。 与 实用 性 相 比 ,可 用 性 重视 了 人 的 因素 ,重视 了 产品 是 被 
要 最 终 用 户 使 用 的 。 


7.7 协议 测试 


1984 年 国际 标准 化 组 织 ISO 提出 了 开放 式 系统 互 连 ISO/OSI 参考 模型 。1993 年 1 
月 1 ТСР/ІР 被 宣布 为 Internet 上 唯一 正式 的 协议 ,为 Internet 的 发 展 铺 平 了 道路 。 
协议 就 是 计算 机 网 络 和 分 布 式 系统 中 各 种 通信 实体 之 间 相 互 交换 信息 所 必须 遵守 的 一 组 
规则 。 

协议 测试 (Protocol Testing) 是 用 来 保证 协议 实现 的 正确 性 和 有 效 性 的 重要 手段 。 
协议 测试 已 经 成 为 计算 机 网 络 和 分 布 式 系统 协议 工程 学 中 最 活跃 的 领域 之 一 。 近 年 来 ， 
协议 一 致 性 测试 技术 得 到 了 很 好 的 发 展 和 完善 。 

协议 测试 一 般 包 括 以 下 四 种 方面 的 测试 。 


172 


系统 测试 


(1) 一 致 性 测试 (Conformance Testing): 检测 所 实现 的 系统 与 协议 规范 符合 程度 ， 
以 及 测试 协议 实现 是 否 严 格 遵循 相应 的 协议 描述 。 

(2) 性 能 测试 (Performance Testing): 检测 协议 实体 或 系统 的 性 能 指标 (数据 传输 
率 、 连 接 时 间 , 执 行 速 度 、 吞 吐 量 、 并 发 度 等 ), 即 用 实验 的 方法 来 观测 被 测 协议 实现 的 各 种 
性 能 参数 。 

(3) 互 操作 性 测试 (Interoperability Testing) : 检测 同一 协议 不 同 实现 版 本 之 间或 同 
一 类 协议 不 同 实现 版 本 之 间 互 通 能 力 和 互 连 操作 能 力 。 

(4) 健壮 性 测试 (Robustness Testing): 检测 协议 实体 或 系统 在 各 种 恶劣 环境 下 运 
行 的 能 力 ( 信 道 被 切断 ` 通 信 技 术 掉 电 、 注 入 干扰 报 文 等 ) 。 

性 能 测试 和 健壮 性 测试 前 面 用 比较 多 的 篇 幅 介 绍 了 ,下 面 主要 介绍 一 致 性 测试 和 互 
操作 性 测试 。 


1. 一 致 性 测试 


一 致 性 测试 是 协议 测试 的 一 个 重要 方面 ,一 致 性 测试 开展 最 早 ,也 形成 了 很 多 有 价值 
的 成 果 , 是 性 能 测试 . 互 操作 性 测试 和 健壮 性 测试 的 基础 ,是 协议 开发 人 员 首 要 关心 的 问 
题 , 它 测试 协议 的 实现 是 否 符合 协议 规范 。 一 致 性 测试 是 一 种 黑 盒 测 试 , 它 不 涉及 协议 的 
内 部 实现 ,只 是 从 外 面 的 行为 来 判断 协议 的 实现 是 否 符合 要 求 。1991 年 国际 标准 化 组 织 
ISO 制订 的 国际 标准 ISO 9646 , 即 OSI 协议 一 致 性 测试 的 方法 和 框架 ,用 自然 语言 描述 
了 基于 OSI 七 层 参考 模型 的 协议 测试 过 程 、 概 念 和 方法 。 


2. 互 操作 性 测试 


协议 测试 系统 是 对 协议 进行 有 效 测试 的 有 机 的 、 完 整 的 统一 体 。 协议 一 致 性 测试 目 
的 是 检测 IUT(Implementation Under Test) 是 否 能 够 按照 协议 标准 所 规定 的 实现 了 它 的 
功能 ,但 是 并 不 验证 IUT 与 其 他 系统 的 互 操作 性 ,所 以 一 致 性 测试 无 法 检查 出 IUT 在 与 
其 他 系统 互 连 时 功能 上 的 不 正确 性 。 因 此 必须 能 够 对 IUT 互 连 时 的 互 操作 性 功能 进行 
检测 。 在 互 操 作 规 程 测试 中 , 既 可 以 存在 专门 的 测试 系统 ,也 可 以 不 存在 。 当 没有 专门 的 
测试 系统 存在 时 , 互 操 作 的 测试 过 程 只 是 简单 地 将 两 个 被 测 系统 互 连 在 一 起 ,由 测试 人 员 
或 测试 程序 对 两 个 系统 的 行为 进行 控制 和 观察 。 这 种 互 操 作 性 测试 方法 有 许多 缺陷 。 当 
被 测试 系统 由 多 层 协 议 组 成 时 ,测试 系统 无 法 对 内 部 协议 层 的 行为 进行 观察 ,也 无 法 得 到 
像 协 议 一 致 性 测试 中 那样 详尽 的 测试 报告 ,所 以 当 发 现 功能 上 的 问题 时 ,就 无 法 准确 地 定 
位 是 哪 一 层 协议 实现 有 错误 。 而 且 在 这 种 测试 结构 下 ,只 能 观察 到 被 测 系统 向 高 层 提 供 
的 服务 , 却 无 法 对 底层 的 信息 交换 进行 监测 ,从 而 无 法 观察 到 被 测 系统 对 底层 不 正常 行为 
反应 。 所 以 这 种 不 带 专 用 测试 系统 的 互 操作 规程 测试 只 能 达到 互 连 通 性 测试 的 目的 ,而 
不 能 成 为 严格 意义 上 的 “ 互 操 作 性 测试 "。 由 于 协议 的 互 操作 性 测试 没有 像 一 致 性 测试 那 
样 的 国际 标准 ,所 以 各 种 互 操作 系统 所 使 用 的 方法 都 不 相同 ,而 其 测试 效率 也 差别 很 大 。 

互 操作 性 测试 的 主要 过 程 与 一 致 性 测试 有 许多 相似 的 地 方 , 主 要 有 如 下 一 些 步 又 : 

(1) 通过 分 析 在 实际 网 络 环境 下 的 协议 标准 ,定义 测试 目的 ,制定 抽象 测试 集 。 

(2) 根据 测试 集 开发 互 操 作 性 测试 可 执行 测试 集 。 
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(3) 执行 互 操作 测试 ,每 个 测试 项 的 测试 结果 与 一 致 性 测试 一 样 ,也 分 为 测试 通过 、 
测试 失败 和 测试 无 结论 三 种 。 
(4) 对 测试 结果 进行 分 析 , 产 生 测 试 报告 。 


7.8 文档 测试 


早期 的 许多 应 用 软件 仅仅 有 一 个 叫 Readme 的 文本 文件 ,进行 文档 测试 未 免 有 点 小 
题 大 做 。 但 二 三 十 年 过 去 了 ,现在 的 软件 文档 已 成 为 软件 的 一 个 重要 组 成 部 分 ,而 且 种 类 
繁多 ,对 文档 的 测试 也 变 得 必 不 可 少 。 图 7-11 为 WinRAR 的 Readme 的 文件 。 


XED WEO 格式 0) SEV MHW 
欢迎 使 用 ван 压缩 文件 管理 器 


ра ена 压缩 文件 。 控 制 台 RAR 只 支持 RAR 
扩展 各 的 文件 。zIP ВХ, С АТА 户 可 以 
нін ы -WinRRR， 它 可 必 Hs WEAF 


Bii 


ои ón 5. Intel 可 执行 程序 压缩 的 特殊 优化 算法 


和 
В 
ЖҮРЕК Ew 
ERDE 


图 7-11 WinRAR 的 Readme 的 文件 


7.8.1 文档 测试 的 含义 


1. 基本 概述 


文档 测试 (Documentation Testing) 是 提交 给 用 户 的 文档 进行 验证 ,目标 是 验证 软件 
文档 是 否 正确 记录 系统 的 开发 全 过 程 的 技术 细节 。 通 过 文档 测试 可 以 改进 系统 的 可 用 
性 \ 可 靠 性 、 可 维护 性 和 安装 性 。 


2. 文档 内 容 


1) 测试 方案 

主要 设计 怎么 测试 ,什么 内 容 和 采用 什么 样 的 方法 ,经 过 分 析 可 以 得 到 相应 的 测试 用 
例 表 。 

2) 测试 执行 策略 

主要 包括 哪些 可 以 先 测试 ,哪些 可 以 放 在 一 起 测试 之 类 的 。 

3) 测试 用 例 

主要 根据 测试 用 例 列表 , 写 出 每 一 个 用 例 的 操作 步 又、 紧急 程度 、 预 置 结 果 和 备注 
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4) 缺陷 描述 报告 

主要 包括 测试 环境 的 介绍 、 预 置 条 件 、 测 试 人 员 、 问 题 重 现 的 操作 步骤 和 当时 测试 的 
现场 信息 。 

5) 整个 项 目的 测试 报告 

从 设计 和 执行 的 角度 上 来 对 此 项 目测 试 情况 的 介绍 ,从 分 析 中 总 结 此 次 设计 和 执行 
做 得 好 的 地 方 和 需要 努力 的 地 方 和 对 此 项 目的 一 个 质量 评价 。 


3. 文档 测试 的 重要 性 


对 于 用 户 来 说 ,软件 文档 是 软件 的 一 部 分 ,所 以 文档 的 错误 也 是 软件 缺陷 。 错 误 的 解 
释 可 能 会 引导 用 户 无 法 完成 某 些 软件 已 具有 的 功能 。 如 果 安 装 文档 不 正确 ,用 户 无 法 进 
行 安装 ,肯定 是 软件 的 缺陷 。 

好 的 文档 能 达到 提高 易 用 性 、 提 高 可 靠 性 、 降 低 技术 支持 费用 的 目的 ,从 而 提高 了 产 
品 的 整体 质量 。 用 户 通过 文档 可 以 掌握 具体 的 使 用 方法 ,这 提高 了 产品 的 易 用 性 ,避免 了 
用 户 在 摸索 使 用 中 一 些 不 可 预期 的 操作 ,也 就 相对 避免 了 一 些 不 可 预期 的 错误 的 发 生 ,从 
而 提高 了 产品 的 可 靠 性 。 当 用 户 在 遇 到 问题 时 ,多 数 会 向 朋友 或 同事 询问 解决 方法 ,再 就 
是 通过 帮助 文档 或 请 求 公司 帮助 。 约 30% 的 用 户 通过 文档 解决 了 问题 ,也 就 避免 了 公司 
提供 费用 不 菲 的 技术 支持 。 


4. 文档 测试 的 三 类 文件 


文档 测试 有 三 大 类 分 别 是 开发 文件 ,用户 文件 .管理 文件 。 

1) 开发 文件 

开发 文件 包括 可 行 性 研究 报告 .软件 需求 说 明 书 .数据 要 求 说 明 书 、 概 要 设计 说 明 书 、 
详细 设计 说 明 书 数据库 设计 说 明 书 ,模块 开 发 卷宗 。 

(1) 系统 定义 的 目标 是 否 与 用 户 的 要 求 一 致 。 

(2) 系统 需求 分 析 阶 段 提 供 的 文档 资料 是 否 齐全 。 

(3) 文档 中 的 所 有 描述 是 否 完整 清晰 ,准确 地 反映 用 户 要 求 。 

(4) 与 所 有 其 他 系统 成 分 的 重要 接口 是 否 都 已 经 描述 。 

(5) 被 开发 项 目的 数据 流 与 数据 结构 是 否 足 够 ,确定 。 

(6) 所 有 图 表 是 否 清楚 ,在 不 补充 说 明 时 能 否 理解 。 

(7) 主要 功能 是 否 已 包括 在 规定 的 软件 范围 之 内 ,是 否 都 已 充分 说 明 。 

(8) 软件 的 行为 和 必须 处 理 的 信息 .必须 完成 的 功能 是 否 一 致 。 

(9) 设计 的 约束 条 件 或 限制 条 件 是 否 符合 实际 。 

ао 是 否 考虑 了 开发 的 技术 风险 。 

(11) 是 否 考虑 过 软件 需求 的 其 他 方案 。 

(12) 是 否 考 虑 过 将 来 可 能 会 提出 的 软件 需求 。 

(13) 是 否 详细 制定 了 检验 标准 ,它们 能 和 否 对 系统 定义 是 否 成 功 进行 确认 。 

(14) 有 没有 遗漏 .重复 或 不 一 致 的 地 方 。 

(15) 用 户 是 否 审 查 了 初步 的 用 户 手 册 或 原型 。 
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(16) 项 目 开发 计划 中 的 估算 是 否 受到 了 影响 。 
(17) 接口 。 分 析 软 件 各 部 分 之 间 的 联系 ,确认 软件 的 内 部 接口 与 外 部 接口 是 否 已 经 


明确 定义 。 模 块 是 否 满足 高 内 聚 低 耦 合 的 要 求 。 模 块 作用 范围 是 否 在 其 控制 范围 之 内 。 
确认 该 软件 设计 在 现 有 的 技术 条 件 下 和 预算 范围 内 是 否 能 按时 实现 。 


(18) 实用 性 。 确 认 该 软件 设计 对 于 需求 的 解决 方案 是 否 实用 。 
(19) 技术 清晰 度 。 确 认 该 软件 设计 是 否 以 一 种 易于 翻译 成 代码 的 形式 表达 。 
(20) 可 维护 性 。 从 软件 维护 的 角度 出 发 ,确认 该 软件 设计 是 否 考虑 了 方便 未 来 的 


维护 。 


报告 


后 


(21) 质量 。 确 认 该 软件 设计 是 否 表 现 出 良好 的 质量 特征 。 

(22) 各 种 选择 方案 。 看 是 否 考虑 过 其 他 方案 ,比较 各 种 选择 方案 的 标准 是 什么 。 
(23) 限制 。 评 估 对 该 软件 的 限制 是 否 实现 ,是 否 与 需求 一 致 。 
(24) 其 他 具体 问题 。 对 于 文档 、 可 测试 性 、 设 计 过 程 等 进行 评估 。 
2) 用 户 文件 

用 户 文件 包括 用 户 手册 ,操作 手册 。 

(1) 把 用 户 文 档 作为 测试 用 例 选择 依据 。 

(2) 确切 的 按照 文档 所 描述 的 方法 使 用 系统 。 

(3) 测试 每 个 提示 和 建议 ,检查 每 条 陈述 。 

(4) 查找 容易 误导 用 户 的 内 容 。 

(5) 把 缺陷 并 入 缺陷 跟踪 库 。 

(6) 测试 每 个 在 线 帮助 超 链接 。 

(7) 测试 每 条 语句 ,不 要 想当然 。 

(8) 表现 的 像 一 个 技术 编辑 而 不 是 一 个 被 动 的 评审 者 。 

(9) 首先 对 整个 文档 进行 一 般 的 评审 ,然后 进行 一 个 详细 的 评审 。 
ао 检查 所 有 的 错误 信息 。 

(11) 测试 文档 中 提供 的 每 个 样 例 。 

(12) 保证 所 有 索引 的 入 口 有 文档 文本 。 

(13) 保证 文档 覆盖 所 有 关键 用 户 功能 。 

(14) 保证 阅读 类 型 不 是 太 技术 化 。 

(15) 寻找 相对 比较 弱 的 区 域 , 这 些 区 域 需 要 更 多 的 解释 。 

3) 管理 文件 

管理 文件 包括 项 目 开发 计划 ,测试 计划 ,测试 分 析 报 告 . 开 发 进度 月 报 、 项 目 开发 总 结 


软件 测试 中 的 文档 测试 主要 是 对 相关 的 设计 报告 和 用 户 使 用 说 明 进行 测试 ,对 于 设 


计 报 告 主要 是 测试 程序 与 设计 报告 中 的 设计 思想 是 否 一 致 ;对 于 用 户 使 用 说 明 进 行 测试 
时 ,主要 是 测试 用 户 使 用 说 明 书 中 对 程序 操作 方法 的 描述 是 否 正确 ,重点 是 用 户 使 用 说 明 
中 提 到 的 操作 例子 要 进行 测试 ,保证 采用 的 例子 能 够 在 程序 中 正确 完成 操作 。 
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具体 来 说 ,文档 的 种 类 如 下 : 
(1) 联机 帮助 文档 或 用 户 手册 。 
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这 是 人 们 最 容易 想到 的 文档 。 用 户 手 册 是 随 软件 发 布 而 印 制 的 小 册子 ,通常 是 简单 
的 软件 使 用 入 门 指导 书 。 而 详细 的 帮助 指导 内 容 通常 以 联机 帮助 文档 的 形式 出 现 , 有 索 
引 和 搜索 功能 ,用 户 可 以 方便 、 快 捷 地 查找 所 需 信 息 。 微 软 的 联机 帮助 文档 内 容 非 常 全 
面 。 多 数 情况 下 联机 帮助 文档 已 成 为 软件 的 一 部 分 ,有 时 也 在 网 站 上 发 布 。 

(2) 指南 和 向 导 。 

是 程序 和 文档 融合 在 一 起 形成 的 ,可 以 引导 用 户 一 步 一 步 完 成 任务 的 一 种 工具 ,如 
Microsoft Office WF. 

(3) RR RAHA. 

简单 的 可 以 是 一 页 纸 ,复杂 的 可 以 是 一 本 手册 。 

(4) 示例 及 模板 。 

例如 , 某 些 系 统 提供 给 用 户 填 写 的 表单 模板 。 

(5) 错误 提示 信息 。 

常常 被 忽略 ,但 确 属于 文档 。 一 个 较 特殊 的 例子 ,服务 器 系统 运行 时 检测 到 系统 资源 
达到 临界 值 或 受到 攻击 时 ,给 管理 员 发 送 的 警告 邮件 。 

(6) 用 于 演示 的 图 像 和 声音 。 

(7) 授权 /注册 登记 表 及 用 户 许可 协议 。 

(8) 软件 的 包装 .广告 宣传 材料 .标签 和 不 干 胶 条 。 

有 些 用 户 会 认真 对 待 ,并 很 好 地 利用 它 , 因 为 错误 或 缺少 必要 的 信息 可 能 带 来 麻烦 。 
甚至 标签 上 的 信息 等 均 为 文档 测试 的 内 容 。 

(9) 授权 /注册 登记 表 。 

(10) 最 终 用 户 许可 协议 .用 来 解释 使 用 软件 的 法 律 条 款 。 


5. 注意 事项 


(1) 仔细 阅读 ,跟随 每 个 步骤 ,检查 每 个 图 形 ,尝试 每 个 示例 。 
(2) 检查 文档 的 编写 是 否 满足 文档 编写 的 目的 。 

O 内 容 是 否 齐全 、 正 确 。 

(4) 内 容 是 否 完善 。 

G) 标记 是 否 正确 。 


7.8.2 文档 性 测试 方法 


1. 文档 走 查 


文档 走 查 通过 阅读 文档 ,来 检查 文档 的 质量 。 走 查 最 有 效 的 工具 是 检查 单 ,检查 单 的 
设计 有 两 条 原则 : 横向 分 块 ,将 文档 分 为 若干 部 分 ,划分 的 基本 单位 是 文档 的 章节 ;纵向 
分 类 ,将 同一 类 错误 ,设计 在 一 个 检查 单 中 ,只 检查 规定 的 检查 项 。 


2. 数据 校对 
只 需 检 查 文档 中 数据 所 在 部 分 ,而 不 必 检 查 全 部 文档 。 检 查 的 数据 主要 有 边界 值 . 程 


177 


《软件 测试 技术 教程 》 


序 的 版 本 、 硬 件 配置 .参数 缺 省 值 等 。 
边界 值 校对 : 通过 查阅 设计 文档 ,检查 用 户 文档 中 的 边界 值 , 例 如 所 需 内 存 最 小 值 ， 
数据 表示 范围 等 。 如 果 设 计 文档 中 没有 给 出 明确 值 , 需 要 测试 人 员 测 试 这 些 值 。 


3. 操作 流程 检查 


程序 的 操作 流程 主要 有 安装 / 印 载 操作 过 程 、 参 数 配置 操作 过 程 、 功 能 操作 和 向 导 功 
能 。 对 这 些 操 作 流 程 的 检查 如 同 程序 的 测试 ,需要 运行 程序 ,检查 的 方法 是 对 比 文档 是 否 
符合 程序 的 执行 流程 ,检查 文档 的 描述 是 否 准确 和 易于 理解 。 

操作 流程 检查 与 程序 测试 相似 ,但 是 测试 人 员 不 需要 编写 测试 用 例 ,文档 的 输入 输出 
就 是 测试 输入 输出 ,如 果 程 序 执行 的 结果 与 文档 不 一 致 ,需要 进一步 确认 是 文档 的 错误 还 
是 程序 的 错误 。 


4. 引用 测试 


文档 之 间 的 相互 引用 ,如 术语 .图 、 表 和 示例 等 ,是 缺陷 的 多 发 处 。 加 之 文档 中 究 竞 有 
多 少 处 引用 ,事先 并 不 清楚 。 因 此 ,测试 起 来 比较 困难 。 引 用 是 单 向 指针 ,适用 追踪 法 , 即 
从 文档 开始 处 , 逐 项 检查 引用 的 正确 性 。 


5. 可 用 性 测试 


本 项 测试 只 针对 文档 的 可 用 性 ,不 涉及 整个 软件 的 可 用 性 ,软件 可 用 性 测试 是 更 复杂 
的 问题 。 这 项 测试 又 分 为 两 种 策略 : 一 是 由 软件 专家 进行 测试 ,要 求 测试 者 是 软件 专家 ， 
对 被 测试 软件 的 功能 非常 熟悉 ,掌握 相应 领域 知识 ,专家 依靠 他 们 的 经 验 和 知识 完成 测 
试 ;二 是 用 户 测试 ,选择 一 些 对 软件 不 熟悉 ,但 具有 操作 软件 必需 领域 知识 的 人 员 来 承担 ， 
他 们 以 用 户 加 初学 者 的 身份 测试 文档 的 可 用 人 性。 


6. 链接 测试 


与 引用 测试 类 似 , 但 是 链接 测试 是 专用 于 测试 电子 文档 中 的 超级 链接 。 当 超级 链接 
关系 复杂 时 ,这 项 测试 也 较 复杂 ,需要 借助 于 有 向 图 ,否则 可 能 迷失 在 链接 中 。 测 试 方法 
是 为 每 个 链接 在 有 向 图 中 画 一 条 有 向 边 , 直 到 所 有 的 链接 都 反映 到 有 向 图 中 ,如 果 有 失败 
的 链接 或 不 正确 的 链接 ,就 找到 了 缺陷 。 


7.9 GUI 软件 测试 


用 户 界面 是 指 软件 中 的 可 见 外 观 及 其 底层 与 用 户 交互 的 部 分 (菜单 .对 话 框 ,窗口 和 
其 他 控件 )。20 世纪 末 计 算 机 操作 由 命令 行 界面 发 展 到 图 形 用 户 界面 ,图 形 用 户 界面 的 
广泛 流行 是 当今 计算 机 技术 的 重大 成 就 之 一 , 它 极 大 地 方便 了 非 专业 用 户 的 使 用 ,人 们 不 
青 需 要 死记 硬 背 大 量 的 命令 ,而 可 以 通过 窗口 .菜单 方便 地 进行 操作 。 
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7.9.1 GUI 测试 概述 


1. GUI 测试 的 含义 


图 形 用 户 界面 (Graphical User Interface,GUD) 是 计算 机 软件 与 用 户 进行 交互 的 主要 
方式 。GUI 软件 测试 是 指 对 使 用 GUI 的 软件 进行 的 软件 测试 。GUI 的 存在 为 用 户 的 操 
作 带 来 了 极 大 的 方便 ,同时 ,也 使 得 GUI 软件 更 复杂 、 更 难以 测试 。GUI 软件 的 测试 由 
于 其 凸现 出 来 的 重要 性 ,已 日 渐 引 起 学 术 界 和 工业 界 的 兴趣 和 重视 。 然 而 ,目前 关于 
GUI 软件 测试 的 研究 还 处 于 初级 阶段 ,很 多 问题 还 没有 解决 ,GUI 软件 测试 依然 需要 
较 高 人 工 成 本 ,目前 的 技术 还 不 能 满足 保证 软件 质量 的 实际 需求 。 一 般 来 说 , 当 一 个 
软件 产品 完成 GUI 设 计 后 ,就 确定 了 它 的 外 观 架构 和 GUI 元 素 ,GUI 本 身 的 测试 工作 
就 可 以 进行 。 


2. GUI 软件 的 主要 特点 


1) МІМР 

W(Windows) 窗 口 ,是 用 户 或 系统 的 一 个 工作 区 域 。 一 个 屏幕 上 可 以 有 多 个 窗口 。 

I(Icons) 图 符 , 系 形象 化 的 图 形 标志 ,易于 人 们 理解 。 

M(Menu) 菜 单 ,可 供用 户 选 择 的 功能 提示 。 

P(PointingDevices) 鼠 标 , 便 于 用 户 直 接 对 屏幕 对 象 进 行 操作 。 

2) 用 户 模 型 

GUI 采用 了 不 少 Desktop 桌面 办 公 方 式 ,使 应 用 者 共享 一 个 直观 的 界面 框架 。 由 于 
人 们 熟悉 办 公 桌 的 情况 ,因而 对 计算 机 显示 的 图 符 的 含义 容易 理解 ,诸如 文件 夹 , 收 件 箱 、 
画笔 工作 短 、 时 钟 等 。 使 软件 更 加 美观 ,易于 被 用 户 所 接受 。 

3) 直接 操作 

用 户 操 作 简 便 、 直 观 。 过 去 的 界面 不 仅 需 要 记忆 大 量 命 令 , 而 且 需 要 指定 操作 对 象 的 
位 置 ,如 行 号 ,空格 数 、X 及 Y 的 坐标 等 。 采 用 GUI 后 ,用 户 可 直接 对 屏幕 上 的 对 象 进行 
操作 ,如 拖 动 ,删除 .插入 以 至 放大 和 旋转 等 。 用 户 执行 操作 后 ,屏幕 能 立即 给 出 反馈 信息 
或 结果 ,因而 称 为 “所 见 即 所 得 >(What You See Is What You Get) 。 用 鼠标 代替 了 键盘 ， 
给 用 户 带 来 了 方便 。 

4) 操作 的 连续 性 和 可 逆 性 

能 够 在 有 限 面积 内 显示 更 丰富 的 信息 ,操作 的 连续 性 和 可 逆 性 能 够 避免 许多 无 意义 
的 或 者 错误 的 用 户 输入 。 

因此 , 越 来 越 多 的 软件 利用 GUI 来 与 用 户 进 行 交互 ,GUI 软件 已 成 为 计算 机 软件 的 
主流 。 深 入 人 们 日 常 工作 和 生活 的 各 种 办 公 软 件 、 财 务 软件 、Internet 浏览 器 、Web 应 用 
程序 ,都 是 GUI 软件 。 
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7.9.2 GUI 软件 测试 方法 


1. GUI 软件 测试 的 难点 


1) 测试 用 例 需要 专门 的 定义 

测试 用 例 严格 来 说 包括 软件 输入 及 其 期 望 输出 ,但 通常 也 将 软件 输入 称 为 测试 用 例 。 
而 GUI 软件 的 状态 与 测试 历史 相关 ,软件 运行 的 结果 与 软件 初始 状态 .测试 历史 和 当前 
测试 输入 都 有 关系 ,难以 用 简单 的 数据 结构 表示 ;测试 的 期 望 输出 也 变 得 很 复杂 。 这 使 得 
测试 用 例 的 定义 变 成 一 个 首要 问题 ,有 了 明确 的 测试 用 例 的 定义 才能 够 进行 进一步 的 研 
究 。 同 时 ,测试 用 例 的 定义 对 测试 的 效率 也 会 产生 直接 影响 。 

2) 测试 用 例 的 生成 变 得 复杂 

GUI 软件 的 测试 输入 是 事件 序列 ,而 这 些 事件 的 发 生 没 有 固定 的 顺序 ,因此 GUI $ 
件 的 输入 域 非常 庞大 或 者 无 穷 。 另 一 方面 ,GUI 软件 的 输入 受到 GUI 的 结构 和 状态 的 限 
制 ,在 其 输入 域 上 的 很 多 事件 序列 是 无 效 的 ,无 法 正确 执行 或 者 不 会 得 到 软件 的 响应 。 如 
何 获得 有 效 的 测试 用 例 成 为 生成 GUI 测试 用 例 的 关键 。 

3) 测试 用 例 的 自动 执行 变 得 困难 

GUI 软件 的 输入 和 输出 是 交替 进行 的 ,而 且 测 试 输入 受到 GUI 结构 和 状态 的 限制 ， 
这 些 特点 使 得 自动 测试 时 需要 时 刻 监 视 GUI 的 结构 和 状态 。 

4) 需要 新 的 测试 覆盖 准则 

软件 接收 到 事件 后 即 调用 相应 的 代码 来 响应 该 事件 。 由 于 事件 的 发 生 没有 固定 的 顺 
序 , 而 软件 的 运行 又 与 测试 历史 相关 ,使 得 GUI 软件 的 控制 流 和 数据 流 都 变 得 极其 复杂 ， 
直接 应 用 现 有 的 覆盖 准则 成 本 比较 高 ,所 以 需要 研究 针对 GUI 测试 的 覆盖 准则 来 指导 测 
试用 例 的 生成 和 判断 测试 的 充分 性 。 

5) GUI 软件 的 操作 界面 的 不 确定 性 

很 多 GUI 软件 为 用 户 提供 了 若干 快捷 键 .快捷 方式 等 ,这 些 界 面 的 元 素 对 用 户 操作 
习惯 会 产生 重大 影响 ,在 软件 可 靠 性 研究 中 需要 考虑 到 GUI 对 操作 剖面 的 影响 。 


2. GUI 软件 测试 方法 


1) GUI 测试 覆盖 准则 

软件 测试 覆盖 准则 是 一 个 被 关注 很 久 的 课题 ,是 指 测试 中 对 测试 需求 覆盖 程度 的 要 
求 。 而 测试 覆盖 率 是 用 来 定量 描述 对 测试 需求 覆盖 程度 的 度量 。 可 以 说 覆盖 准则 是 各 种 
软件 测试 技术 的 核心 。 常 用 的 覆盖 准则 包括 语句 覆盖 准则 、 分 支 覆盖 准则 .条件 覆 盖 准 
则 .路径 覆 盖 准 则 ,状态 覆盖 准则 .数据 流 覆 盖 准 则 等 。 这 些 覆 盖 准 则 多 是 在 20 世纪 90 
年 代 之 前 被 定义 的 ,都 不 是 针对 GUI 软件 测试 的 。 在 GUI 软件 测试 中 ,由 于 其 输入 是 事 
件 序列 ,而 这 个 序列 是 由 用 户 决定 的 ,具有 很 大 的 随意 性 和 随机 性 ,这 使 得 GUI 软件 的 控 
制 流 图 和 数据 流 图 比 起 传统 非 GUI 软件 要 复杂 很 多 ,导致 这 些 传统 的 覆盖 准则 难以 使 
用 。 因 此 有 必要 专门 为 GUI 软件 测试 定义 新 的 覆盖 准则 。 
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2) GUI 测试 用 例 生 成 

当前 国内 外 学 者 针对 GUI 测试 用 例 生 成 的 问题 已 经 提出 了 若干 种 方法 ,如 录制 / 回 
放 技 术 、 基 于 有 限 状 态 自 动机 生成 测试 用 例 、 基 于 UML 生成 GUI 测试 用 例 、 基 于 事件 流 
图 生成 测试 用 例 。 

(1) 录制 /回放 技术 。 

HP WinRunner、IBM Rational 这 类 САЛ 测试 工具 中 提供 了 测试 用 例 录制 /回放 机 
制 ,可 以 将 用 户 在 被 测 GUI 软件 上 的 操作 录制 为 测试 脚本 ,而 在 进行 测试 时 回放 这 些 脚 
本 。 这 是 工业 界 应 用 比较 广 的 一 种 测试 用 例 生成 方法 。 然 而 这 类 方法 需要 人 工 设计 并 录 
制 测试 用 例 ,可 以 说 仅仅 是 人 工 测试 的 辅助 工具 。 

(2) 基于 有 限 状 态 自动 机 生成 测试 用 例 。 

有 限 状态 自动 机 (Finite State Machine,FSM) 是 一 种 能 够 描述 交互 式 系统 的 数学 模 
型 。GUI 软件 作为 一 种 交互 式 系统 ,也 可 以 使 用 FSM 进行 建 模 。 基 于 FSM 的 测试 用 例 
生成 主要 有 以 下 几 种 方法 。 

Belli 在 文献 中 使 用 FSM 对 GUI 软件 与 用 户 的 操作 以 及 软件 缺陷 进行 了 建 模 ,并 给 
出 算法 将 FSM 转换 为 表达 式 ,然后 利用 这 些 表 达 式 生成 GUI 测试 用 例 。Chen 等 以 被 测 
软件 GUI 上 的 GUI 部件 属性 为 状态 ,事件 作为 输出 ,GUI 部 件 属性 的 变化 作为 输出 , 构 
建 FSM, 通 过 FSM 上 的 路 径 搜索 得 到 输入 序列 作为 测试 用 例 。 

上 述 方法 直接 使 用 FSM 对 GUI 进行 建 模 ,由 于 存在 状态 爆炸 的 问题 ,难以 处 理 较 大 
的 GUI 软件 ,FSM 模型 的 创建 难度 也 比较 大 。Shehady 等 使 用 带 变量 的 有 限 状 态 自动 
机 (Variable Finite State Machine, VFSM, 有 的 文献 也 称 为 扩展 有 限 状 态 自 动机 , 即 
Extended Finite State Machine, EFSM) 来 对 GUI 软件 进行 建 模 。VFSM 可 以 通过 定义 
变量 大 大 减少 状态 空间 中 状态 的 数量 。 文 中 创建 VFSM 时 是 以 当前 窗口 作为 状态 ,将 测 
试 中 操作 的 或 关注 的 变量 加 入 自动 机 中 ;然后 给 出 算法 ,将 VFSM 转化 为 FSM, 再 由 
FSM 生成 事件 序列 作为 GUI 测试 用 例 。 但 这 种 方法 依然 难以 应 用 于 大 的 GUI 软件 , 创 
建 VFSM 难度 也 比较 大 ,需要 很 高 的 人 力 成 本 。 

White 等 提出 了 一 种 使 用 多 个 FSM 对 被 测 GUI 软件 进行 建 模 的 方法 ,以 缩小 FSM 
的 规模 ,减少 生成 测试 用 例 的 个 数 。 这 种 方法 首先 将 在 用 户 操作 后 产生 的 GUI 上 可 观察 
的 变化 作为 一 个 响应 (responsibility) ;再 对 每 个 响应 人 工地 辨识 出 一 系列 GUI 部 件 , 通 
过 对 这 些 部 件 的 操作 可 以 产生 这 个 响应 ,这 样 的 一 系列 GUI 部 件 成 为 一 个 完全 交互 序列 
(Complete Interaction Sequence,CIS) ;然后 对 每 一 个 CIS 建立 一 个 FSM; 下 一 步 是 利用 
文中 给 出 的 方法 将 FSM 中 相对 独立 的 状态 子 集 组 合成 一 个 超 状 态 ; 最 后 利用 变换 后 的 
FSM 生成 测试 用 例 。 

(3) 基于 UML 生成 GUI 测试 用 例 。 

UML(Unified Modeling Language, 统 一 建 模 语言 ) 是 用 来 对 软件 系统 进行 可 视 化 建 
模 的 一 种 语言 。 在 软件 开发 过 程 中 ,人 们 常用 UML 来 编写 设计 文档 。 

Vieira 等 中 提出 利用 UML 用 例 图 和 活动 图 来 生成 GUI 测试 用 例 的 方法 。 这 种 方 
法 首先 要 人 工 对 UML 进行 标注 .然后 根据 标注 后 的 UML 文档 生成 测试 操作 。 这 类 方 
法 使 用 的 前 提 是 具有 完善 的 UML 软件 设计 文档 或 UML 软件 规约 (Specification), 具 有 
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较 大 的 局 限 性 ;所 生成 的 测试 用 例 还 需要 人 工 转 化 为 测试 脚本 ,或 者 人 工 施加 到 被 测 软 
件 上 。 

(4) 基于 事件 流 图 生成 测试 用 例 。 

事件 流 图 是 Memon 等 提出 的 一 种 描述 事件 间 跟 随 关 系 的 模型 。 所 谓 跟随 是 指 在 测 
试 中 一 个 事件 能 够 在 另 一 个 事件 施加 后 跟随 着 施加 到 被 测 软件 上 。 事 件 流 图 中 的 路 径 就 
是 在 测试 中 可 以 运行 的 测试 用 例 序 列 。 在 文献 中 ,Memon 等 使 用 遍历 算法 在 事件 流 图 上 
查找 特定 的 路 径 来 作为 GUI 测试 用 例 。 这 种 方法 没有 明确 的 目标 ,会 生成 大 量 宛 余 测试 
用 例 。 

3) GUI 的 手工 测试 和 自动 化 测试 

(1) GUI 的 手工 测试 。 

按照 软件 产品 的 文档 说 明 设 计 测 试用 例 ,依靠 人 工 单 击 的 方式 输入 测试 数据 ,然后 把 
实际 运行 结果 与 预期 的 结果 相 比 较 后 ,得 出 测试 结论 。 但 是 , 随 着 软件 产品 的 功能 越 来 越 
复杂 , 越 来 越 完善 ,一 般 一 套 软 件 包 括 丰 富 的 用 户 界面 ,每 个 界面 里 又 有 相当 数量 的 对 象 
元 素 , 所 以 GUI 测试 完全 依靠 手工 测试 方法 是 难以 达到 测试 目标 的 。 

(2) GUI 的 自动 化 测试 。 

首先 选择 一 个 能 够 完全 满足 测试 自动 化 需要 的 测试 工具 ,其 次 是 使 用 编程 语言 ,如 
Java, C+ 等 编写 自动 化 测试 脚本 。 但 是 ,任何 一 种 工具 都 不 能 够 完全 支持 众多 不 同 应 用 
的 测试 ,常用 的 做 法 是 使 用 一 种 主要 的 自动 化 测试 工具 ,并 且 使 用 编程 语言 编写 自动 化 测 
试 脚本 以 弥补 测试 工具 的 不 足 。 自 动 化 测试 的 引入 大 大 提高 了 测试 的 效率 和 准确 性 ,而 
且 专业 测试 人 员 设 计 的 脚本 可 以 在 软件 生命 周期 的 各 个 阶段 重复 使 用 。 


7.9.3 GUI 测试 的 几 个 要 素 


GUI 测试 的 几 个 要 素 包 括 : 
符合 标准 和 规范 。 

。 直观 性 。 

。 一致 性 。 

。 灵活 性 。 

。 舒适 性 。 

。 正 确 性 。 

。 实用 性 。 

1. 设计 符合 标准 和 规范 

标准 和 规范 详细 说 明了 软件 对 用 户 应 该 有 什么 样 的 外 观 和 感觉 ,以 苹果 公司 和 微软 
ARAHAL. RA aA “Macintosh Human Interface Guideline”, 微 软 公 司 有 “Microsoft 
Windows User Experience”, 如 图 7-12 所 示 。 


以 微软 著名 的 字 处 理 软件 Word 和 演示 文稿 软件 ШЫ 
PowerPoint 为 例 , 它 们 的 窗口 界面 充分 体现 了 其 规范 性 、 标 题 图 7-12 几 个 提示 标志 
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栏 .菜单 栏 .工具 栏 等 ,如 图 7-13 和 图 7-14 所 示 。 
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图 7-14 演示 文稿 软件 PowerPoint 界面 


在 软件 设计 的 范围 ,可 以 通过 以 下 方法 来 减少 用 户 输入 的 工作 量 。 
(1) 对 共同 的 输入 内 容 设 置 默认 值 ( 缺 省 值 ) 。 

(2) 改动 填 入 已 输入 过 的 内 容 或 需要 重复 输入 的 内 容 。 

(3) 如 果 输 入 内 容 是 来 自 一 个 有 限 的 备 选集 ,可 以 采用 列表 选择 。 


2. 设计 的 直观 性 


界面 设计 的 直观 性 如 图 7-15 Ж. 
。 用 户 界面 洁净 .不 拥挤 ,功能 或 期 待 的 响应 


显 且 出 现在 预期 的 地 方 


。 组 织 和 布局 合理 ,允许 用 户 轻松 地 从 一 个 功 图 7-15 界面 设计 的 直观 性 
能 转 到 另 一 个 功能 ,下 一 步 做 什么 明显 ,任何 
时 刻 都 可 以 决定 放弃 ,退回 或 退出 ,输入 得 到 确认 等 。 
。 没 有 和 多余 功 能 ,软件 整体 或 局 部 不 能 做 得 太 多 或 其 太 多 特性 把 工作 复杂 化 了 ,不 
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使 人 感到 信息 太 庞 杂 。 
。 及 时 的 出 错 处 理 和 帮助 功能 ,系统 要 给 用 户 提供 反馈 ,弹出 式 信息 或 声音 提示 等 。 
数据 内 容 应 当 根据 它们 的 使 用 频率 ,或 它们 的 重要 性 ,或 它们 的 输入 次 序 进行 
组 织 。 
(1) 明确 的 输入 : 只 有 当 用 户 按 下 输入 的 确认 键 时 , 才 确 认输 入 。 有 助 于 在 输入 过 
程 中 一 旦 出 现 错误 能 及 时 纠 错 。 
(2) 明确 的 动作 : 在 表格 项 之 间 自 动 地 跳跃 /转换 并 不 总 是 可 取 的 ,尤其 是 对 于 不 熟 
练 的 用 户 ,往往 会 被 搞 得 无 所 适 从 ,要 使 用 Tab 键 或 回 车 键 控制 在 表格 单元 间 的 移动 。 
(3) 明确 的 取消 : 如 果 用 户 中 断 了 一 个 输入 序列 ,已 经 输入 的 数据 不 要 马上 丢弃 。 
这 样 才能 对 一 个 也 许 是 错误 的 取消 动作 进行 重新 思考 。 
(4) 确认 删除 : 为 避免 错误 的 删除 动作 可 能 造成 的 损失 ,在 输入 删除 命令 后 ,必须 进 
行 确认 ,然后 才 执行 删除 操作 。 例 如 ,你 确认 要 把 文件 放 入 回收 站 吗 ? (是 / 否 ) 来 确认 。 
(5) 允许 编辑 : 在 一 个 文件 输入 过 程 中 或 输入 完成 后 ,允许 用 户 对 其 编辑 ,以 修改 他 
们 正在 输入 的 数据 或 修改 他 们 以 前 输入 的 数据 。 
(6) 提示 输入 的 范围 : 应 当 显示 有 效 回答 的 集合 及 其 范围 。 
(7) 提供 恢复 : 应 允许 用 户 恢复 输入 以 前 的 状态 。 这 在 编辑 和 修改 错误 的 操作 经 常 
Жа]. 


3. 界面 设计 的 一 致 性 和 灵活 性 


(1) 快捷 键 和 菜单 选项 。 

(2) 术语 和 命令 。 

(3) 按钮 位 置 和 等 价 的 按键 。 
(4) 状态 跳 转 灵活 。 

(5) 状态 终止 和 跳 过 灵活 。 
(6) 数据 输入 和 输出 灵活 。 


4. 界面 设计 的 舒适 性 


界面 设计 的 错误 处 理 ,程序 应 该 在 用 户 执行 严重 错误 的 操作 之 前 提出 警告 ,并且 人 允许 
用 户 恢复 由 于 错误 操作 导致 丢失 的 数据 。 


5. 界面 设计 的 正确 性 和 实用 性 


测试 正确 性 就 是 测试 是 否 做 了 该 做 的 事 。 在 测试 时 需要 注意 ,有 没有 多 余 的 或 遗漏 
的 功能 ,功能 是 否 执行 了 与 用 户 手册 或 产品 说 明 不 符 的 操作 ? 界面 设计 的 正确 性 和 实用 
性 如 图 7-16 所 示 。 实 用 性 不 是 指 软件 本 身 是 否 实用 ,而 仅 指 具体 特性 是 否 实用 。 在 审查 
文档 ,准备 测试 或 实际 测试 时 ,看 到 的 特性 是 否 具有 实际 价值 。 
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Microsoft XPS Document Writer 
XPSPort: 


图 7-16 Adobe Reader 的 “打印 设置 "对 话 框 


7.9.4 GUI 测试 主要 内 容 


系统 测试 


图 形 用 户 界 面 ( GUI ) 对 软件 测试 提出 了 有 趣 的 挑战 ,因为 GUI 开发 环境 有 可 复 用 
的 构件 ,开发 用 户 界面 更 加 省 时 而 且 更 加 精确 。 
与 此 同时 ,GUI 的 复杂 性 也 增加 了 ,从 而 加 大 了 设计 和 执行 测试 用 例 的 难度 。 现 在 
GUI 设计 和 实现 有 了 越 来 越 多 的 类 似 , 也 就 产生 了 一 系列 的 测试 标准 。 
表 7-5 中 的 问题 可 以 作为 常见 GUI 测试 的 测试 用 例 。 


表 7-5 GUI 测试 常见 问题 


н ж 号 问 题 
正确 性 1 用 户 界 面 是 否 与 软件 的 功能 相 融 洽 
2 是 否 所 有 界面 元 素 的 文字 和 状态 都 正确 无 误 
3 用 户 能 否 不 必 阅 读 手册 就 能 使 用 常用 的 功能 
4 是 否 所 有 界面 元 素 提供 了 充分 而 必要 的 提示 
易 理 解 性 5 界面 结构 能 够 清晰 地 反映 工作 流程 
6 用 户 是 否 容易 知道 自己 在 界面 中 的 位 置 , 不 会 迷失 方向 
т 有 联机 帮助 吗 
8 相同 的 界面 元 素 是 否 有 相同 的 视 感 和 相同 的 操作 方式 
风格 9 字体 是 否 一 致 
10 是 否 符合 大 多 数 用 户 使 用 同类 软件 的 习惯 
11 是 否 对 重要 的 输入 数据 进行 校 验 
错误 处 理 12 执行 有 风险 的 操作 时 ,有 “确定 ”或 “放弃 ”等 提示 吗 
13 是 否 根据 用 户 的 权限 自动 屏蔽 某 些 功能 
适应 性 14 所 有 界面 元 素 都 具备 充分 必要 的 键盘 操作 和 鼠标 操作 吗 
15 初学 者 和 专家 都 有 合适 的 方式 操作 这 个 界面 吗 
国际 化 16 是 否 使 用 国际 通行 的 图 标 和 语言 
17 度量 单位 .日 期 格式 .人 的 名 字 等 是 否 符合 国际 惯例 
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续 表 
н 标 ж = а а 
Ев 18 是 否 具 有 与 众 不 同 的 、 让 用 户 记忆 深刻 的 界面 设计 

19 是 否 在 具备 必要 的 “一 致 性 ”的 前 提 下 突出 “个 性 化 ”设计 

20 界面 的 布局 符合 软件 的 功能 逻辑 吗 

21 界面 元 素 是 否 在 水 平 或 者 垂直 方向 对 齐 

22 界面 元 素 的 尺寸 是 否 合理 行列 的 间距 是 否 保持 一 致 
A 23 是 否 恰当 地 利用 窗 体 和 控件 的 空白 ,以 及 分 割 线条 
PIRI 24 窗口 切换 .移动 ,改变 大 小 时 ,界面 正常 吗 

25 界面 的 色调 是 否 让 人 感到 和 谐 .满意 

26 重要 的 对 象 是 否 用 醒目 的 色彩 表示 

27 色彩 使 用 是 否 符合 行业 的 习惯 


7.9.5 GUI 测试 常见 问题 


1. 录入 界面 问题 


(1) 输入 字段 要 完整 , 且 要 与 列表 字段 相符 合 。 

(2) 必 填 项 一 律 在 后 面 用 * 表示 。 

(3) 字段 需要 做 校 验 , 如 果 校 验 不 对 需要 在 处 理 之 前 要 有 相关 的 提示 信息 。 

(4) 录入 字段 的 排序 按照 流程 或 使 用 习惯 ,字段 特别 多 的 时 候 需 要 进行 分 组 显示 。 
(5) 下 拉 框 不 选 值 的 时 候 应 该 提供 默认 值 。 

(6) 相同 字段 的 录入 方式 应 该 统一 。 

(7) 录入 后 自动 计算 的 字段 要 随 着 别 的 字段 修改 更 新 。 

(8) 日 期 参照 应 该 既 能 输入 ,又 能 从 文本 框 选择 。 


2. 界面 格式 问题 


(1) 字体 颜色 、 大 小 、 对 齐 方式 、 加 粗 的 一 致 性 。 

(2) 文本 框 . 按 钮 ,滚动 条 、 列 表 等 控件 的 大 小 、 对 齐 、 位 置 的 一 致 性 。 

(3) 不 同 界面 显示 相同 字段 的 一 致 性 。 

(4) 列表 的 顺序 排列 应 该 统一 。 

(5) 下 拉 框 中 的 排列 顺序 需要 符合 使 用 习惯 或 者 是 按照 特定 的 规则 排 定 。 
(6) 所 有 弹出 窗口 居中 显示 或 者 最 大 化 显示 。 

Ст) 人 员 时间 的 默认 值 一 般 取 当 前 登录 人 员 和 时 间 。 

(8) 对 于 带 有 单位 的 字段 ,需要 字段 的 标签 后 面 添 加 单位 。 


3. 功能 问题 
(1) 按钮 功能 的 实现 。 
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系统 测试 


(2) 信息 保存 提交 后 系统 给 出 “保存 /提交 成 功 ” 提 示 信 息 , 并 自动 更 新 显示 。 

(3) 所 有 有 提交 按钮 的 页 面 都 要 有 保存 按钮 。 

Са) 选择 记录 后 单 击 删除 按钮 要 提示 ”确实 要 删除 吗 ?”。 

(5) 需要 考虑 删除 的 关联 性 , 即 删除 某 一 个 内 容 需 要 同时 删除 其 关联 的 某 些 内 容 。 
(6) 界面 只 读 的 时 候 ,应 该 不 能 编辑 。 


7.10 网 站 测试 


网 站 测试 与 传统 的 软件 测试 不 同 ,不 但 要 检查 网 站 是 否 按 设计 要 求 运行 ,还 要 测试 网 
络 系统 是 否 符合 不 同 用 户 的 浏览 器 显示 等 网 络 特有 的 要 求 。 


7.10.1 网 站 测试 的 含义 


网 站 测试 指 的 是 当 一 个 网 站 制作 完 上 传 到 服务 器 之 后 针对 网 站 的 各 项 性 能 所 做 的 检 
测 工 作 。 它 与 软件 测试 有 一 定 的 区 别 , 其 除了 要 求 外 观 的 一 致 性 以 外 ,还 要 求 其 在 各 个 浏 
览 器 下 的 兼容 性 ,以 及 在 不 同 环境 下 的 显示 差异 。 如 图 7-17 所 示 , 就 是 人 民 网 首页 ,包含 
简单 的 文字 、 图 片 和 链接 。 


DARM - Wicrosoft Intornot Explorer 
XAD WMD FV ERO IAD HHV 


o=- 0-82 0а rm Ө 2-3 a- 


msaa ашо аж HAHA а на елес ARBRRE ~o аяға 
Kao 
Www.people.c әман FAAA PAREREA 中 国共 严 党 历史 网 PEATA 中 起 那 "12330" 举 报 同 站 “全国 社 科 规 划 网 ФЕЖЕН ЯН 1 


жа на 社会 电视 юл 领导 旅游 人 物 ми 理财 股票 EA ар 环保 公益 彩票 ан 科技 文史 чт 图 片 


жа 理论 传媒 рия 0% Ым 台湾 港澳 ТЖ 汽车 | 1 Жажа Бе 食品 健康 时 尚 。 文化 体育 娱乐 。 游戏 пФ 


地 方 加 导入 言说 иза зешалшеажииаяаиия 


Әсе Englsh БЖЖ Ғақас Ecpafol 


Ый: omanan. явят, ванн. ЕЕ. ЕЦ" 


аванша шенеешез ралллтая жапамшіп ееш AANE- дег Флав 中 华 一 家 екн 


美丽 中 国之 旅 Ьанхезвй Фама ЖЕНЕЖТТЕ 5 NH" ВЕЛНЕ жазап мата шей-желт 


Й n" ERKA 
人 民 日 报 评论 部 : 打开 解放 思想 这 个 “总 开关 网 
[人 民 日 报 评论 部 : Аат) [评论 员 : 坚持 社会 主义 市 场 经 济 改革 方向] [以 “三 种 意识 "推进 全 面 深 化 改革 ] ES] 
十 八 届 三 中 全 会 专题 报道 «Әне ARAS 
2 4” і g 李克强 : 愿 与 欧 方 共同 反对 贸易 投资 保护 TERERAA EEE EE 
p rmo уч 


z к DEFINEA HEARSE FA 
а асер новце заа 


Р 7-17 网 站 首页 


网 站 测试 主要 包括 性 能 测试 .功能 测试 .可 用 性 测试 .安全 性 测试 和 兼容 性 测试 。 
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7.10.2 网 站 测试 的 主要 内 容 


1. 性 能 测试 


1) 连接 速度 测试 

用 户 连接 到 Web 应 用 系统 的 速度 根据 上 网 方式 的 变化 而 变化 ,他 们 或 许 是 电话 拨 
号 ,或 是 宽带 上 网 。 当 下 载 一 个 程序 时 ,用 户 可 以 等 较 长 的 时 间 , 但 如 果 仅 仅 访问 一 个 页 
面 就 不 会 这 样 。 如 果 Web 系统 响应 时 间 太 长 (例如 超过 10 秒 钟 ) ,用 户 就 会 因 没 有 耐心 
等 待 而 离开 。 

另外 ,有 些 页 面 有 超时 的 限制 ,如 果 响 应 速度 太 慢 ,用 户 可 能 还 没 来 得 及 浏览 内 容 ,就 
需要 重新 登录 了 。 而 且 , 连 接 速度 太 慢 ,还 可 能 引起 数据 丢失 ,使 用 户 得 不 到 真实 的 页 面 。 

2) 负载 测试 

负载 测试 是 为 了 测量 Web 系统 在 某 一 负载 级 别 上 的 性 能 ,以 保证 Web 系统 在 需求 
范围 内 能 正常 工作 。 负 载 级 别 可 以 是 某 个 时 刻 同 时 访问 Web 系统 的 用 户 数 量 , 也 可 以 是 
在 线 数据 处 理 的 数量 。 例 如 ,负载 测试 需要 测量 Web 应 用 系统 能 允许 多 少 个 用 户 同 时 在 
线 , 如 果 超 过 了 这 个 数量 ,会 出 现 的 现象 ,Web 应 用 系统 能 否 处 理 大 量 用 户 对 同一 个 页 面 
的 请 求 等 。 

3) 压力 测试 

进行 压力 测试 是 指 实际 破坏 一 个 Web 应 用 系统 ,测试 系统 的 反映 。 压 力 测试 是 测试 
系统 的 限制 和 故障 恢复 能 力 , 也 就 是 测试 Web 应 用 系统 会 不 会 崩溃 ,在 什么 情况 下 会 崩 
省 。 黑 客 常常 提供 错误 的 数据 负载 ,直到 Web 应 用 系统 崩溃 , 当 系 统 重新 启动 时 获得 存 
取 权 。 


2. 功能 测试 


1) 链接 测试 

链接 是 Web 应 用 系统 的 一 个 主要 特征 , 它 是 在 页 面 之 间 切 换 和 指导 用 户 去 一 些 不 知 
道 地 址 的 页 面 的 主要 手段 。 链 接 测 试 可 分 为 三 个 方面 。 首 先 , 测 试 所 有 链接 是 否 按 指示 
的 那样 确实 链接 到 了 该 链接 的 页 面 ;其 次 ,测试 所 链接 的 页 面 是 否 存在 ;最 后 ,保证 Web 
应 用 系统 上 没有 孤立 的 页 面 ,所 谓 孤 立 页 面 是 指 没有 链接 指向 该 页 面 ,只 有 知道 正确 的 
URL 地 址 才能 访问 。 

2) 表单 测试 

当 用 户 给 Web 应 用 系统 管理 员 提 交 信 息 时 ,就 需要 使 用 表单 操作 ,例如 用 户 注 册 、 登 
录 、 信 息 提 交 等 。 在 这 种 情况 下 ,我们 必须 测试 提交 操作 的 完整 性 ,以 校 验 提交 给 服务 器 
的 信息 的 正确 性 。 例 如 ,用 户 填写 的 出 生日 期 与 工作 经 历 是 否 恰当 ,填写 的 所 属 省 份 与 所 
在 城市 是 否 匹 配 等 。 如 果 使 用 了 默认 值 ,还 要 检验 默认 值 的 正确 性 。 如 果 表 单 只 能 接受 
指定 的 某 些 值 , 则 也 要 进行 测试 。 例 如 ,只 能 接受 某 些 字符 ,测试 时 可 以 跳 过 这 些 字符 ,看 
系统 是 否 会 报错 。 如 图 7-18 所 示 ,就 是 一 个 表单 ,需要 填写 用 户 信息 ,提交 后 可 以 申请 免 
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费 的 163 邮箱 。 表 单 测试 用 例如 表 7-6 所 示 。 
表 7-6 表单 测试 用 例 


测试 用 例 号 操作 描述 数据 期 望 结果 实际 结果 
өп ШАСТИ. неон 一 致 /不 一 至 
өз: (МАМЕ нал 一 致 /不 一 至 
өз |МАНЕЯНИЕЯЯ) | | 拒绝 接受 输入 的 字符 一 臻 /不一致 
зн | 于 个 可 和 区 城中 不 该 | | 在 用 户 正三 其 他 内 | agy 
өз | 下 人 各 六 区 城中 不 该 |  [RNNEANNTER] ака 


TT enami 


图 7-18 一 个 表单 


3) Cookies 测试 

Cookies 通常 用 来 存储 用 户 信息 和 用 户 在 某 应 用 系统 的 操作 , 当 一 个 用 户 使 用 
Cookies 访问 了 某 一 个 应 用 系统 时 , Web 服务 器 将 发 送 关 于 用 户 的 信息 ,把 该 信息 以 
Cookies 的 形式 存储 在 客户 端 计算 机 上 ,这 可 用 来 创建 动态 和 自 定义 页 面 或 者 存储 登录 
等 信息 。 

如 果 Web 应 用 系统 使 用 了 Cookies ,就 必须 检查 Cookies 是 否 能 正常 工作 。 测 试 的 
内 容 可 包括 Cookies 是 否 起 作用 ,是 否 按 预定 的 时 间 进 行 保存 ,刷新 对 Cookies 有 什么 影 
响 等 。 
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Cookies 测试 用 例如 表 7-7 所 示 。 
表 7-7 Соокіеѕ 测试 用 例 
测试 用 例 号 操作 描述 数据 期 望 结 果 实际 结果 
ST1 测试 Cookies 打开 和 关闭 see Cookies 在 打开 时 是 否 起 作用 | 一 致 /不 一 致 


4) 开发 语言 测试 

Web 开发 语言 版 本 的 差异 可 以 引起 客户 端 或 服务 器 端 严 重 的 问题 ,例如 使 用 哪 种 版 
本 的 HTML 等 。 当 在 分 布 式 环境 中 开发 时 ,开发 人 员 都 不 在 一 起 ,这 个 问题 就 显得 尤为 
重要 。 除 了 HTML 的 版 本 问题 外 ,不 同 的 脚本 语言 ,例如 Java, JavaScript, ActiveX, 
VBScript 等 也 要 进行 验证 。 

5) 数据 库 测 试 

在 Web 应 用 技术 中 ,数据 库 起 着 重要 的 作用 ,数据 库 为 Web 应 用 系统 的 管理 .运行 、 
查询 和 实现 用 户 对 数据 存储 的 请 求 等 提供 空间 。 在 Web 应 用 中 ,最 常用 的 数据 库 类 型 是 
关系 型 数据 库 ,可 以 使 用 SQL 对 信息 进行 处 理 。 

在 使 用 了 数据 库 的 Web 应 用 系统 中 ,一 般 情况 下 .可 能 发 生 两 种 错误 ,分 别 是 数据 一 
致 性 错误 和 输出 错误 。 数 据 一 致 性 错误 主要 是 由 于 用 户 提交 的 表单 信息 不 正确 而 造成 
的 ,而 输出 错误 主要 是 由 于 网 络 速度 或 程序 设计 问题 等 引起 的 ,针对 这 两 种 情况 ,可 分 别 
进行 测试 。 


3. 可 用 性 测试 


1) 导航 测试 

导航 描述 了 用 户 在 一 个 页 面 内 操作 的 方式 ,在 不 同 的 用 户 接口 控制 之 间 , 例 如 按钮 、 
对 话 框 和 窗口 等 ;或 在 不 同 的 连接 页 面 之 间 。 通 过 考虑 下 列 问题 ,可 以 决定 一 个 Web 应 
用 系统 是 否 易于 导航 。 

(1) 导航 是 否 直观 ? 

(2) Web 系统 的 主要 部 分 是 否 可 通过 主页 存 取 ? 

(3) Web 系统 是 否 需要 站 点 地 图 .搜索 引擎 或 其 他 的 导航 帮助 ? 

2) 图 形 测试 

在 Web 应 用 系统 中 ,适当 的 图 片 和 动画 既 能 起 到 广告 宣传 的 作用 ,又 能 起 到 美化 页 
面 的 功能 。 一 个 Web 应 用 系统 的 图 形 可 以 包括 图 片 动画 边框 .颜色 .字体 背景、 按钮 
等 。 图形 测试 的 内 容 有 : 

(1) 要 确保 图 形 有 明确 的 用 途 .图 片 或 动画 不 要 胡乱 地 堆 在 一 起 , 以免 浪费 传输 
时 间 。 

(2) 验证 所 有 页 面 字 体 的 风格 是 否 一 致 。 

(3) 背景 颜色 应 该 与 字体 颜色 和 前 景 颜色 相 搭配 。 

(4) 图 片 的 大 小 和 质量 也 是 一 个 很 重要 的 因素 ,一 般 采 用 JPG 或 GIF 压缩 。 
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3) 内 容 测试 

内 容 测试 用 来 检验 Web 应 用 系统 提供 信息 的 正确 性 、 准 确 性 和 相关 性 。 

信息 的 正确 性 是 指 信息 是 可 靠 的 还 是 误 传 的 。 例 如 ,在 商品 价格 列表 中 ,错误 的 价格 
可 能 引起 财政 问题 甚至 导致 法 律 纠 纷 ; 信 息 的 准确 性 是 指 是 否 有 语法 或 拼写 错误 。 这 种 
测试 通常 使 用 一 些 文字 处 理 软 件 来 进行 ,例如 使 用 Microsoft Word 的 “拼音 与 语法 检查 ” 
功能 。 

4) 整体 界面 测试 

整体 界面 是 指 整 个 Web 应 用 系统 的 页 面 结 构 设 计 , 是 给 用 户 的 一 个 整体 感 。 例 如 ， 
当 用 户 浏览 Web 应 用 系统 时 是 否 感 到 舒适 ,是 否 赁 直觉 就 知道 要 找 的 信息 在 什么 地 方 ? 
整个 Web 应 用 系统 的 设计 风格 是 否 一 致 

对 整体 界面 的 测试 过 程 , 其 实 是 一 个 对 最 终 用 户 进行 调查 的 过 程 。 一 般 Web 应 用 系 
统 采取 在 主页 上 做 一 个 调查 问卷 的 形式 ,来 得 到 最 终 用 户 的 反馈 信息 。 对 所 有 的 可 用 人 性 
测试 来 说 ,都 需要 有 外 部 人 员 的 参与 ,最 好 是 最 终 用 户 的 参与 。 


4. 安全 性 测试 


安全 性 测试 是 对 网 站 的 安全 性 可 能 存在 的 漏洞 测试 .攻击 性 测试 和 错误 性 测试 。 对 
电子 商务 的 客户 服务 器 应 用 程序 .数据 .服务 器 网络、 防火 墙 等 进行 测试 。 网 站 的 安全 性 
测试 区 域 主要 有 : 

1) 用 户 身份 认证 

现在 的 Web 应 用 系统 基本 采用 先 注册 ,后 登录 的 方式 。 因 此 ,必须 测试 有 效 和 无 效 
的 用 户 名 和 密码 ,要 注意 到 是 否 大 小 写 敏感 ,可 以 试 多 少 次 的 限制 ,是 否 可 以 不 登录 而 直 
接 浏 览 某 个 页 面 等 。 

2) 时 间 控 制 

Web 应 用 系统 是 否 有 超时 的 限制 ,也 就 是 说 ,用 户 登录 后 在 一 定时 间 内 没有 单 击 任 
何 页 面 ,是 否 需要 重新 登录 才能 正常 使 用 。 

3) 服务 器 软件 管理 

服务 器 端的 脚本 常常 构成 安全 漏洞 ,这 些 漏 洞 又 常常 被 黑客 利用 。 所 以 ,还 要 测试 没 
有 经 过 授权 ,就 不 能 在 服务 器 端 放置 和 编辑 脚本 的 问题 。 

4) 日 志 管理 

为 了 保证 Web 应 用 系统 的 安全 性 ,日志 文件 是 至 关 重 要 的 。 需 要 测试 相关 信息 是 否 
写 进 了 日 志文 件 , 是 否 可 追踪 。 

5) 加 密 处 理 

检验 加 密 的 力度 是 否 足 够 ,用 户 密码 的 存储 是 否 安全 ,以 及 密 钥 管理 。 


5. 兼容 性 测试 


1) 平台 测试 
市 场 上 有 很 多 操作 系统 ,如 Windows、UNIX、Macintosh、Linux 等 。Web 应 用 系统 
的 最 终 用 户 究 竟 使 用 哪 一 种 操作 系统 ,取决 于 用 户 系 统 的 配置 。 这 样 ,就 可 能 会 发 生 兼容 
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性 问题 ,同一 个 应 用 可 能 在 某 些 操作 系统 下 能 正常 运行 ,但 在 另外 的 操作 系统 下 可 能 会 运 
行 失败 。 因 此 ,在 Web 系统 发 布 之 前 ,需要 在 各 种 操作 系统 下 对 Web 系统 进行 兼容 性 
测试 。 

2) 浏览 器 测试 

浏览 器 是 Web 客户 端 最 核心 的 构件 ,来 自 不 同 厂 商 的 浏览 器 对 Java, JavaScript, 
ActiveX plug-ins 或 不 同 的 HTML 规格 有 不 同 的 支持 。 例 如 ,ActiveX 是 Microsoft 的 
产品 ,是 为 Internet Explorer 而 设计 的 ,JavaScript 是 Netscape 的 产品 ,Java 是 Sun 的 产 
品 等 。 另 外 ,框架 和 层次 结构 风格 在 不 同 的 浏览 器 中 也 有 不 同 的 显示 ,甚至 根本 不 显示 。 
不 同 的 浏览 器 对 安全 性 和 Java 的 设置 也 不 一 样 。 测 试 浏览 器 兼容 性 的 一 个 方法 是 创建 
一 个 兼容 性 矩阵 。 在 这 个 矩阵 中 ,测试 不 同 厂商 、 不 同 版 本 的 浏览 器 对 某 些 构件 和 设置 的 
适应 性 。 


7.11 «ПАМ В 测试 


验收 测试 阶段 既 有 非 正式 的 测试 ,也 可 以 有 计划 、 有 系统 的 测试 。 有 时 ,验收 测试 长 
达 数 周 甚至 数 月 ,不断 暴露 错误 ,导致 开发 延期 。 一 个 软件 产品 ,可 能 拥有 众多 用 户 ,不 可 
能 由 每 个 用 户 验收 ,此 时 多 采用 称 为 a,B 测试 的 过 程 ,用 来 发 现 那些 似乎 只 有 最 终 用 户 才 
能 发 现 的 问题 。 

а 测试 是 指 软件 开发 公司 组 织 内 部 人 员 模 拟 各 类 用 户 行 对 即将 面市 软件 产品 ( 称 为 a 
版 本 ) 进 行 测试 ,试图 发 现 错误 并 修正 。a 测试 的 关键 在 于 尽 可 能 逼真 地 模拟 实际 运行 环 
境 和 用 户 对 软件 产品 的 操作 并 尽 最 大 努力 涵盖 所 有 可 能 的 用 户 操作 方式 。 经 过 测试 调 
整 的 软件 产品 称 为 版 本 。 紧 随 其 后 的 B 测 试 是 指 软件 开发 公司 组 织 各 方面 的 典型 用 户 在 
日 常 工作 中 实际 使 用 B 版 本 ,并 要 求 用 户 报告 异常 情况 、 提 出 批评 意见 。 然 后 软件 开发 公 
司 再 对 B 版 本 进行 改 错 和 完善 。 一 般 包括 功能 度 、 安 全 可 靠 性 、 易 用 性 、 可 扩充 性 ,兼容 
性 ,效率 、 资 源 占用 率 、 用 户 文档 八 个 方面 。 

实施 验收 测试 的 常用 策略 有 三 种 ,它们 分 别 是 正式 验收 测试 a 测试 .8 测试 。 


1. 正式 验收 测试 


正式 验收 测试 是 一 项 管理 严格 的 过 程 , 它 通常 是 系统 测试 的 延续 。 计 划 和 设计 这 些 
测试 的 周密 和 详细 程度 不 亚 于 系统 测试 。 选 择 的 测试 用 例 应 该 是 系统 测试 中 所 执行 测试 
用 例 的 子 集 。 不 要 偏离 所 选择 的 测试 用 例 方向 ,这 一 点 很 重要 。 在 很 多 组 织 中 ,正式 验收 
测试 是 完全 自动 执行 的 。 

对 于 系统 测试 ,活动 和 工件 是 一 样 的 。 在 某 些 组 织 中 ,开发 组 织 ( 或 其 独立 的 测试 小 
组 ) 与 最 终 用 户 组 织 的 代表 一 起 执行 验收 测试 。 在 其 他 组 织 中 ,验收 测试 则 完全 由 最 终 用 
户 组 织 执行 ,或 者 由 最 终 用 户 组 织 选 择 人 员 组 成 一 个 客观 公正 的 小 组 来 执行 。 

这 种 测试 形式 的 优点 包括 : 

(1) 要 测试 的 功能 和 特性 都 是 已 知 的 。 

(2) 测试 的 细节 是 已 知 的 并 且 可 以 对 其 进行 评测 。 
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(3) 这 种 测试 可 以 自动 执行 ,支持 回归 测试 。 
(4) 可 以 对 测试 过 程 进行 评测 和 监测 。 

(5) 可 接受 性 标准 是 已 知 的 。 

这 种 测试 形式 的 缺点 包括 : 

(1) 要 求 大 量 的 资源 和 计划 。 

(2) 这 些 测 试 可 能 是 系统 测试 的 再 次 实施 。 


2. а 测试 


а 测试 即 非 正式 验收 测试 。 在 非 正式 验收 测试 中 ,执行 测试 过 程 的 限定 不 像 正 式 验 
收 测试 中 那样 严格 。 在 此 测试 中 ,确定 并 记录 要 研究 的 功能 和 业务 任务 ,但 没有 可 以 遵循 
的 特定 测试 用 例 。 测 试 内 容 由 各 测试 员 决定 。 这 种 验收 测试 方法 不 像 正式 验收 测试 那样 
组 织 有 序 , 而 且 更 为 主观 。 

大 多 数 情况 下 , 非 正 式 验收 测试 是 由 最 终 用 户 组 织 执行 的 。 

非 正式 验收 测试 的 优点 包括 : 

(1) 要 测试 的 功能 和 特性 都 是 已 知 的 。 

(2) 可 以 对 测试 过 程 进行 评测 和 监测 。 

(3) 可 接受 性 标准 是 已 知 的 。 

(4) 与 正式 验收 测试 相 比 ,可 以 发 现 更 多 由 于 主观 原因 造成 的 缺陷 。 

非 正式 验收 测试 的 缺点 包括 

(1) 要 求 资源 .计划 和 管理 资源 。 

(2) 无 法 控制 所 使 用 的 测试 用 例 。 

(3) 最 终 用 户 可 能 沿用 系统 工作 的 方式 ,并 可 能 无 法 发 现 缺陷 。 

(4) 最 终 用 户 可 能 专注 于 比较 新 系统 与 遗留 系统 ,而 不 是 专注 于 查找 缺陷 。 

(5) 用 于 验收 测试 的 资源 不 受 项 目的 控制 ,并且 可 能 受到 压缩 。 


3. В 测试 


B 测 试 即 Beta 测试 ,是 由 软件 的 多 个 用 户 在 实际 使 用 环境 下 进行 的 测试 。 测 试 后 这 
些 用 户 返回 有 关 错 误 信 息 给 开发 者 。B 测试 主要 衡量 产品 的 功能 性 .可 用 性 .可靠 性 等 性 
能 ,包括 产品 的 文档 、 客 户 培训 和 产品 的 支持 能 力 。B 测试 由 最 终 用 户 实施 ,通常 开发 (或 
其 他 非 最 终 用 户 ) 组 织 对 其 的 管理 很 少 或 不 进行 管理 。B 测试 是 所 有 验收 测试 策略 中 最 
主观 的 。 

B 测 试 的 优点 包括 : 

Ст) 测试 由 最 终 用 户 实施 。 

(2) 大 量 的 潜在 测试 资源 。 

(3) 提高 客户 对 参与 人 员 的 满意 程度 。 

(4) 与 正式 或 非 正式 验收 测试 相 比 ,可 以 发 现 更 多 由 于 主观 原因 造成 的 缺陷 。 

B 测试 缺点 包括 : 

(1) 未 对 所 有 功能 和 /或 特性 进行 测试 。 
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(2) 测试 流程 难以 评测 。 

(3) 最 终 用 户 可 能 沿用 系统 工作 的 方式 ,并 可 能 没有 发 现 或 没有 报告 缺陷 。 

(4) 最 终 用 户 可 能 专注 于 比较 新 系统 与 遗留 系统 ,而 不 是 专注 于 查找 缺陷 。 

(5) 用 于 验收 测试 的 资源 不 受 项 目的 控制 ,并且 可 能 受到 压缩 。 

(6) 可 接受 性 标准 是 未 知 的 。 

(7) 需要 更 多 辅助 性 资源 来 管理 B 测试 员 。 

一 般 情况 是 当 a 测试 达到 一 定 可 靠 性 时 才 开 始 В 测试 ,8 测试 是 整个 测试 的 最 后 阶 
段 。 产 品 的 所 有 手册 和 文档 也 应 该 在 此 阶段 完全 定稿 。 


7.12 回归 测试 


回归 测试 (Regression Testing) 是 指 在 发 生 修改 之 后 重新 测试 先前 的 测试 以 保证 修 
改 的 正确 性 。 理 论 上 ,软件 产生 新 版 本 ,都 需要 进行 回归 测试 ,验证 以 前 发 现 和 修复 的 错 
误 是 否 在 新 软件 版 本 上 再 次 出 现 。 

根据 修复 好 了 的 缺陷 再 重新 进行 测试 。 回 归 测 试 的 目的 在 于 验证 以 前 出 现 过 ,但 已 
经 修复 好 的 缺陷 不 再 重新 出 现 。 一 般 指 对 某 已 知 修正 的 缺陷 再 次 围绕 它 原来 出 现时 的 步 
又 重新 测试 。 通 常 确定 所 需 的 再 测试 的 范围 时 是 比较 困难 的 ,特别 当 临 近 产 品 发 布 日 期 
时 。 因 为 为 了 修正 某 缺陷 时 必须 更 改 源 代码 ,因而 就 有 可 能 影响 这 部 分 源 代码 所 控制 的 
功能 。 所 以 在 验证 修好 的 缺陷 时 不 仅 要 服从 缺陷 原来 出 现时 的 步骤 重新 测试 ,而 且 还 要 
测试 有 可 能 受 影响 的 所 有 功能 。 因 此 应 当 鼓 励 对 所 有 回归 测试 用 例 进 行 自 动 化 测试 。 

回归 测试 作为 软件 生命 周期 的 一 个 组 成 部 分 ,在 整个 软件 测试 过 程 中 占有 很 大 的 工 
作 量 比重 ,软件 开发 的 各 个 阶段 都 会 进行 多 次 回归 测试 。 在 渐进 和 快速 迭代 开发 中 ,新 版 
本 的 连续 发 布 使 回归 测试 进行 得 更 加 频繁 ,而 在 极端 编程 方法 中 ,更 是 要 求 每 天 都 进行 若 
干 次 回归 测试 。 因 此 ,通过 选择 正确 的 回归 测试 策略 来 改进 回归 测试 的 效率 和 有 效 性 是 
非常 有 意义 的 。 


1. 测试 策略 


对 于 一 个 软件 开发 项 目 来 说 ,项 目的 测试 组 在 实施 测试 的 过 程 中 会 将 所 开发 的 测试 
用 例 保存 到 “测试 用 例 库 ?中 ,并 对 其 进行 维护 和 管理 。 当 得 到 一 个 软件 的 基线 版 本 时 ,用 
于 基线 版 本 测试 的 所 有 测试 用 例 就 形成 了 基线 测试 用 例 库 。 在 需要 进行 回归 测试 的 时 
候 , 就 可 以 根据 所 选择 的 回归 测试 策略 ,从 基线 测试 用 例 库 中 提取 合适 的 测试 用 例 组 成 回 
归 测 试 包 ,通过 运行 回归 测试 包 来 实现 回归 测试 。 保 存在 基线 测试 用 例 库 中 的 测试 用 例 
可 能 是 自动 测试 脚本 ,也 有 可 能 是 测试 用 例 的 手工 实现 过 程 。 

回归 测试 需要 时 间 、 经 费 和 人 力 来 计划 实施 和 管理 。 为 了 在 给 定 的 预算 和 进度 下 ， 
尽 可 能 有 效率 和 有 效力 地 进行 回归 测试 ,需要 对 测试 用 例 库 进行 维护 并 依据 一 定 的 策略 
选择 相应 的 回归 测试 包 。 

1) 测试 用 例 库 的 维护 

为 了 最 大 限度 地 满足 客户 的 需要 和 适应 应 用 的 要 求 , 软 件 在 其 生命 周期 中 会 频繁 地 
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被 修改 和 不 断 推出 新 的 版 本 ,修改 后 的 或 者 新 版 本 的 软件 会 添加 一 些 新 的 功能 或 者 在 软 
件 功 能 上 产生 某 些 变化 。 随 着 软件 的 改变 ,软件 的 功能 和 应 用 接口 以 及 软件 的 实现 发 生 
了 演变 ,测试 用 例 库 中 的 一 些 测 试用 例 可 能 会 失去 针对 性 和 有 效 性 ,而 另 一 些 测试 用 例 可 
能 会 变 得 过 时 ,还 有 一 些 测试 用 例 将 完全 不 能 运行 。 为 了 保证 测试 用 例 库 中 测试 用 例 的 
有 效 性 ,必须 对 测试 用 例 库 进 行 维护 。 同 时 ,被 修改 的 或 新 增添 的 软件 功能 ,仅仅 靠 重新 
运行 以 前 的 测试 用 例 并 不 足以 揭示 其 中 的 问题 ,有 必要 追加 新 的 测试 用 例 来 测试 这 些 新 
的 功能 或 特征 。 因 此 ,测试 用 例 库 的 维护 工作 还 应 包括 开发 新 测试 用 例 , 这 些 新 的 测试 用 
例 用 来 测试 软件 的 新 特征 或 者 覆盖 现 有 测试 用 例 无 法 覆盖 的 软件 功能 或 特征 。 

测试 用 例 的 维护 是 一 个 不 间断 的 过 程 ,通常 可 以 将 软件 开发 的 基线 作为 基准 ,维护 的 
主要 内 容 包 括 下 述 几 个 方面 。 

(1) 删除 过 时 的 测试 用 例 。 

因为 需求 的 改变 等 原因 可 能 会 使 一 个 基线 测试 用 例 不 再 适合 被 测试 系统 ,这 些 测试 
用 例 就 会 过 时 。 

(2) 改进 不 受 控 制 的 测试 用 例 。 

随 着 软件 项 目的 进展 ,测试 用 例 库 中 的 用 例会 不 断 增加 ,其 中 会 出 现 一 些 对 输入 或 运 
行 状态 十 分 敏感 的 测试 用 例 。 这 些 测试 不 容易 重复 且 结 果 难 以 控制 ,会 影响 回归 测试 的 
效率 ,需要 进行 改进 ,使 其 达到 可 重复 和 可 控制 的 要 求 。 

СЗ) 删除 元 余 的 测试 用 例 。 

如 果 存 在 两 个 或 者 更 多 个 测试 用 例 针对 一 组 相同 的 输入 和 输出 进行 测试 ,那么 这 些 
测试 用 例 是 元 余 的。 元 余 测试 用 例 的 存在 降低 了 回归 测试 的 效率 。 所 以 需要 定期 的 整理 
测试 用 例 库 ,并 将 元 余 的 用 例 删除 掉 。 

(4) 增添 新 的 测试 用 例 。 

如 果 某 个 程序 段 ,构件 或 关键 的 接口 在 现 有 的 测试 中 没有 被 测试 ,那么 应 该 开发 新 测 
试用 例 重 新 对 其 进行 测试 。 并 将 新 开发 的 测试 用 例 合并 到 基线 测试 包 中 。 

通过 对 测试 用 例 库 的 维护 不 仅 改善 了 测试 用 例 的 可 用 性 ,而 且 也 提高 了 测试 库 的 可 
信 性 ,同时 还 可 以 将 一 个 基线 测试 用 例 库 的 效率 和 效用 保持 在 一 个 较 高 的 级 别 上 。 

2) 回归 测试 包 的 选择 

选择 回归 测试 策略 应 该 兼顾 效率 和 有 效 性 两 个 方面 。 常 用 的 选择 回归 测试 的 方式 
包括 : 

(1) 再 测试 全 部 用 例 。 

选择 基线 测试 用 例 库 中 的 全 部 测试 用 例 组 成 回归 测试 包 , 这 是 一 种 比较 安全 的 方法 ， 
再 测试 全 部 用 例 具有 最 低 的 遗漏 回归 错误 的 风险 ,但 测试 成 本 最 高 。 全 部 再 测试 几乎 可 
以 应 用 到 任何 情况 下 ,基本 上 不 需要 进行 分 析 和 重新 开发 ,但 是 , 随 着 开发 工作 的 进展 , 测 
试用 例 不 断 增 多 ,重复 原先 所 有 的 测试 将 带 来 很 大 的 工作 量 , 往 往 超 出 了 我 们 的 预算 和 
进度 。 

(2) 基于 风险 选择 测试 。 

可 以 基于 一 定 的 风险 标准 来 从 基线 测试 用 例 库 中 选择 回归 测试 包 。 首 先 运行 最 重要 
的 ,关键 的 和 可 疑 的 测试 ,而 跳 过 那些 非 关 键 的 ,优先 级 别 低 的 或 者 高 稳定 的 测试 用 例 , 这 
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些 用 例 即 便 可 能 测试 到 缺陷 ,这 些 缺 陷 的 严重 性 也 仅 有 三 级 或 四 级 。 一 般 而 言 ,测试 从 主 
要 特征 到 次 要 特征 。 

(3) 再 测试 修改 的 部 分 。 

当 测 试 者 对 修改 的 局 部 化 有 足够 的 信心 时 ,可 以 通过 相依 性 分 析 识 别 软件 的 修改 情 
况 并 分 析 修 改 的 影响 ,将 回归 测试 局 限于 被 改变 的 模块 和 它 的 接口 上 。 通 常 ,一 个 回归 错 
误 一 定 涉及 一 个 新 的 ,修改 的 或 删除 的 代码 段 。 在 允许 的 条 件 下 ,回归 测试 尽 可 能 覆盖 受 
到 影响 的 部 分 。 

再 测试 全 部 用 例 的 策略 是 最 安全 的 策略 ,但 已 经 运行 过 许多 次 的 回归 测试 不 太 可 能 
揭示 新 的 错误 ,而 且 很 多 时 候 , 由 于 时 间 、 人 员 ,设备 和 经 费 的 原因 ,不 允许 选择 青 测试 全 
部 用 例 的 回归 测试 策略 ,此 时 ,可 以 选择 适当 的 策略 进行 缩减 的 回归 测试 。 


2. 测试 实践 


在 实际 工作 中 ,回归 测试 需要 反复 进行 , 当 测 试 者 一 次 又 一 次 地 完成 相同 的 测试 时 ， 
这 些 回归 测试 将 变 得 非常 令 人 厌烦 ,而 在 大 多 数 回归 测试 需要 手工 完成 的 时 候 尤其 如 此 ， 
因此 ,需要 通过 自动 测试 来 实现 重复 的 和 一 致 的 回归 测试 。 通过 测试 自动 化 可 以 提高 回 
归 测试 效率 。 为 了 支持 多 种 回归 测试 策略 ,自动 测试 工具 应 该 是 通用 的 和 灵活 的 ,以 便 满 
足 达 到 不 同 回归 测试 目标 的 要 求 。 

在 测试 软件 时 ,应 用 多 种 测试 技术 是 常见 的 。 当 测试 一 个 修改 了 的 软件 时 ,测试 者 也 
可 能 希望 采用 多 于 一 种 回归 测试 策略 来 增加 对 修改 软件 的 信心 。 不 同 的 测试 者 可 能 会 依 
据 自 己 的 经 验 和 判断 选择 不 同 的 回归 测试 技术 和 策略 。 

回归 测试 并 不 减少 对 系统 新 功能 和 特征 的 测试 需求 ,回归 测试 包 应 包括 新 功能 和 特 
征 的 测试 。 如 果 回 归 测 试 包 不 能 达到 所 需 的 覆盖 要 求 ,必须 补充 新 的 测试 用 例 使 覆盖 率 
达到 规定 的 要 求 。 

回归 测试 是 重复 性 较 多 的 活动 ,容易 使 测试 者 感到 疲劳 和 厌倦 ,降低 测试 效率 ,在 实 
际 工作 中 可 以 采用 一 些 策略 减轻 这 些 问题 。 例 如 ,安排 新 的 测试 者 完成 手工 回归 测试 ,分 
配 更 有 经 验 的 测试 者 开发 新 的 测试 用 例 ,编写 和 调试 自动 测试 脚本 ,做 一 些 探索 性 的 或 
ad hoc 测试 。 还 可 以 在 不 影响 测试 目标 的 情况 下 ,鼓励 测试 者 创造 性 地 执行 测试 用 例 , 变 
化 的 输入 ,按键 和 配置 能 够 有 助 于 激励 测试 者 又 能 揭示 新 的 错误 。 

在 组 织 回归 测试 时 需要 注意 : 

(1) 各 测试 阶段 发 生 的 修改 一 定 要 在 本 测试 阶段 内 完成 回归 ,以 免 将 错误 遗留 到 下 
一 测试 阶段 。 

(2) 回归 测试 期 间 应 对 该 软件 版 本 冻结 ,将 回归 测试 发 现 的 问题 集中 修改 ,集中 
回归 。 


习题 


1. 什么 是 系统 测试 ? 系统 测试 使 用 的 主要 技术 是 黑 盒 测 试 技术 还 是 白 盒 测试 技术 ? 
2. 单元 测试 ,集成 测试 和 系统 测试 有 哪些 区 别 ? 
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. 什么 是 性 能 测试 ? 性 能 测试 时 主要 测试 术语 或 指标 有 哪些 ? 
. 简 述 性 能 测试 中 压力 测试 .容量 测试 .负载 测 试 各 自 的 含义 。 
. 什么 是 可 靠 性 测试 ? 

. 什么 是 安全 性 测试 ? 

.什么 是 恢复 性 测试 ? 

.什么 是 备份 测试 ? 

. 什么 是 可 用 性 测试 ? 

. 什么 是 协议 测试 ? 

. 什么 是 文档 测试 ? 

. 什么 是 GUI? 简 述 GUI 软件 的 主要 特点 。 

. 什么 是 网 站 测试 ? 

. 什么 是 a 测试 和 8B 测试 ? 

. 什么 是 回归 测试 ? 
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第 8 章 自动 化 测试 及 工具 


软件 测试 在 整个 软件 开发 过 程 中 占据 了 将 近 一 半 的 时 间 。 通 过 在 测试 过 程 中 合理 地 
引入 软件 测试 工具 ,能 够 缩短 软件 开发 时 间 ,提高 测试 质量 ,从 而 更 快 , 更 好 地 为 用 户 提供 
需要 的 软件 产品 。 自 动 化 测试 有 着 高 效率 以 及 速度 快 等 优点 ,是 软件 测试 的 发 展 趋势 。 
根据 不 同 测试 用 例 体 系 , 采 用 最 优 的 脚本 技术 与 方法 实现 软件 测试 的 自动 化 ,降低 创建 与 
维护 脚本 的 开销 ,从 而 高 效率 地 进行 软件 测试 。 

测试 工具 根据 测试 方法 的 不 同 , 可 以 分 为 白 盒 测试 工具 、. 黑 盒 测试 工具 和 测试 管理 工 
具 等 。 选 择 测试 工具 不 仅 要 遵守 一 定 的 程序 和 步骤 ,而 且 要 注重 测试 工具 的 不 同 点 ,结合 
自己 项 目的 特点 ,做 出 合理 的 选择 。 

本 章 介绍 了 自动 化 测试 基础 ,包括 自动 化 测试 的 含义 和 自动 化 测试 的 特点 以 及 自动 
化 测试 的 实施 和 自动 化 测试 工具 的 选择 与 比较 ,还 比较 详细 地 介绍 了 国内 外 著名 的 测试 
工具 QTP 和 AutoRunner。 


8.1 自动 化 测试 概述 


软件 开发 的 发 展 过 程 , 就 像 我们 社会 发 展 的 过 程 一 样 ,从 刚 开 始 的 手工 磨坊 式 ,逐步 
的 发 展 到 现在 的 分 工 协作 ,流程 化 .工程 化 。 从 20 世纪 90 年 代 起 ,针对 软件 测试 的 自动 
化 就 已 经 开始 ,并 且 相 应 的 工具 就 层出不穷 。 


8.1.1 自动 化 测试 的 含义 


在 手工 测试 时 发 现 其 有 很 多 局 限 性 ,例如 ,通过 手工 测试 无 法 做 到 覆盖 所 有 代码 路 
径 ; 简 单 的 功能 性 测试 用 例 在 每 一 轮 测试 中 都 不 能 少 ,而 且 具 有 一 定 的 机 械 性 、 重 复 性 , 工 
作 量 往往 较 大 ;许多 与 时 序 . 死 锁 、 资 源 冲 突 、 多 线程 等 有 关 的 错误 ,通过 手工 测试 很 难 捕 
捉 到 ;进行 系统 负载 ,性 能 测试 时 ,需要 模拟 大 量 数 据 或 大 量 并 发 用 户 等 各 种 应 用 场合 时 ， 
很 难 通过 手工 测试 来 进行 ;进行 系统 可 靠 性 测试 时 ,需要 模拟 系统 运行 十 年 、 几 十 年 ,以 验 
证 系统 能 和 否 稳定 运行 ,这 也 是 手工 测试 无 法 模拟 的 ;如 果 有 大 量 ( 成 百 上 千 ) 的 测试 用 例 ， 
需要 在 短 时 间 内 (半天 或 1 天 ) 完 成 ,手工 测试 几乎 不 可 能 做 到 。 这 些 在 手工 测试 时 出 现 
的 问题 促使 人 们 使 用 自动 化 工具 进行 软件 测试 。 

自动 化 测试 (Automated Software Testing) 又 叫 自动 化 软件 测试 ,就 是 通过 开发 软件 
和 使 用 工具 来 进行 软件 测试 。 通 过 录制 测试 脚本 ,然后 执行 这 个 测试 脚本 来 实现 测试 过 
程 的 自动 化 。 自 动 化 测试 是 软件 测试 的 一 个 重要 组 成 部 分 , 它 能 完成 许多 手工 测试 无 法 
实现 或 难以 实现 的 测试 。 正确、 合理 地 实施 自动 化 测试 ,能 够 快速 ,全 面 地 对 软件 进行 测 
试 ,从 而 提高 软件 质量 ,节省 经 费 , 缩 短 软件 发 布 周期 。 

自动 化 就 是 通过 人 们 的 开发 以 及 在 相应 领域 上 使 用 的 一 些 工具 ,尤其 是 在 测试 中 的 
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重复 以 及 烦琐 的 活动 。 自 动 化 测试 是 可 以 执行 一 些 人 们 手工 测试 中 比较 困难 的 测试 工 
作 , 比 如 ,对 于 我 们 1 万 个 用 户 的 一 个 联机 的 系统 中 ,几乎 是 不 可 能 实现 用 手工 以 及 还 有 
操作 的 测试 ,可 是 我 们 运用 自动 化 测试 工具 是 可 以 进行 模拟 1 万 个 用 户 的 输入 。 如 果 一 
个 软件 项 目 有 成 千 上 万 个 测试 用 例 要 执行 ,还 要 重复 执行 ,手工 测试 会 非常 单调 和 枯燥 。 
而 利用 工具 进行 自动 化 测试 就 可 以 把 人 从 这 种 枯燥 单调 的 重复 性 劳动 中 解放 出 来 。 

在 进行 自动 化 测试 需要 考虑 遵循 以 下 五 个 原则 。 


1. 软件 测试 人 员 需 要 掌握 必要 的 软件 开发 知识 和 编码 技巧 


自动 化 测试 时 录制 /回放 的 脚本 开发 方式 是 不 可 能 应 付 所 有 自动 化 测试 需求 的 , 因 
此 ,需要 测试 人 员 掌 握 必 要 的 开发 知识 和 编码 技巧 。 


2. 自动 化 测试 是 一 个 长 期 的 过 程 


不 要 期 望 自动 化 测试 在 短期 内 找到 很 多 缺陷 ,自动 化 测试 只 有 在 长 期 的 运行 后 才能 
体现 出 它 的 价值 。 不 要 以 为 只 要 购买 了 测试 工具 ,录制 一 些 脚 本 ,然后 ,就 可 以 优 哉 游 哉 
地 等 着 自动 化 测试 实现 。 自 动 化 测试 需要 考虑 自动 化 测试 脚本 的 维护 成 本 , 随 着 测试 应 
用 程序 功能 的 增加 和 修改 ,测试 脚本 的 维护 工作 量 会 急剧 增加 。 


3. 确保 自动 化 测试 的 资源 ,包括 人 员 和 技能 


最 好 有 专门 的 自动 化 测试 工程 师 来 保证 自动 化 测试 持续 顺利 地 进行 下 去 ,自动 化 测 
试 工程 师 需 要 对 项 目的 自动 化 测试 负责 ,设计 测试 框架 和 解决 各 种 测试 脚本 结构 ,解决 测 
试 脚本 的 开发 问题 ,确保 自动 化 测试 得 以 计划 ,设计 和 有 序 地 开发 .维护 。 


4. 需要 循序 渐进 地 开展 自动 化 测试 


测试 工程 师 应 该 先 熟悉 工具 和 自动 化 测试 的 基本 技能 ,然后 ,整合 资源 ,开始 实现 一 
些 基本 的 自动 化 测试 用 例 。 先 对 那些 容易 实现 且 相 对 稳定 的 功能 模块 的 自动 化 测试 , 然 
后 再 考虑 逐步 扩展 和 补充 其 他 相对 难 实现 ,或 者 是 比较 不 稳定 的 功能 模块 。 


5. 确保 测试 过 程 的 成 熟 度 


如 果 软 件 企 业 的 测试 过 程 和 项 目 管理 过 程 的 能 力 成 熟 度 比较 低 , 则 实现 自动 化 测试 
的 成 功率 也 比较 低 。 在 展开 自动 化 测试 之 前 , 先 考察 一 下 软件 企业 各 方面 的 管理 能 力 。 
如 果 各 方面 的 能 力 成 熟 度 都 比较 差 的 话 , 则 不 要 盲目 引入 自动 化 测试 。 


8.1.2 自动 化 测试 的 优点 


自动 化 测试 具有 的 优点 如 下 : 

O) 运行 的 速度 快 ,节省 了 时 间 。 自 动 化 测试 的 速度 手工 无 法 相 比 的 ,可 以 加 快 测试 
进度 从 而 加 快 产品 发 布 进度 。 

(2) 提高 了 测试 效率 。 手 工 测试 的 效率 较 低 , 这 在 软件 产品 的 研发 后 期 尤其 明显 , 因 
为 随 着 产品 的 日 趋 完善 ,功能 日 渐 增 多 ,需要 测试 和 检查 的 内 容 越 来 越 多 ,很 容易 遗漏 。 
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加 之 产品 发 布 日 期 日 益 临 近 , 人 工 重复 进行 回归 测试 的 难度 加 大 ,很 难 在 短 时 间 内 完成 大 
面积 的 测试 覆盖 。 

(3) 模拟 测试 条 件 , 可 以 执行 一 些 手工 测试 困难 或 不 可 能 进行 的 测试 。 例 如 ,对 于 大 
量 用 户 的 测试 ,不 可 能 同时 让 足够 多 的 测试 人 员 同时 进行 测试 ,但 是 却 可 以 通过 自动 化 测 
试 模拟 同时 有 许多 用 户 , 从 而 达到 测试 的 目的 。 

(4) 提高 了 准确 度 和 精确 度 , 可 以 运行 更 多 更 烦琐 的 测试 。 测 试 员 尝 试 了 几 百 个 测 
试用 例 以 后 ,注意 力 可 能 会 分 散 , 并 开始 犯错 误 。 而 测试 工具 可 以 重复 执行 同样 的 测试 ， 
并 毫 无 差错 地 检查 测试 结果 。 

(5) 测试 具有 一 致 性 和 可 重复 性 。 由 于 测试 是 自动 执行 的 ,每 次 测试 的 结果 和 执行 
的 内 容 的 一 致 性 是 可 以 得 到 保障 的 ,从 而 达到 测试 的 可 重复 的 效果 。 

(6) 更 好 地 利用 资源 。 将 烦琐 的 任务 自动 化 ,可 以 提高 准确 性 和 测试 人 员 的 积极 性 ， 
将 测试 技术 人 员 解 脱出 来 投入 更 多 精力 设计 更 好 的 测试 用 例 。 有 些 测试 不 适合 于 自动 化 
测试 , 仅 适合 于 手工 测试 ,将 可 自动 化 测试 的 测试 自动 化 后 ,可 以 让 测试 人 员 专注 于 手工 
测试 部 分 ,提高 手工 测试 的 效率 。 另 一 方面 ,手工 测试 需要 测试 人 员 在 场 ,而 自动 化 测试 
可 以 一 天 24 小 时 一周 7 天 地 随时 执行 。 还 可 使 位 于 全 球 不 同 地 方 . 不 同时 区 的 团队 监 
视 和 控制 测试 ,提供 全 球 时 区 的 覆盖 。 

Ст) 对 程序 的 回归 测试 更 方便 。 这 可 能 是 自动 化 测试 最 主要 的 任务 ,特别 是 在 程序 
修改 比较 频繁 时 ,效果 是 非常 明显 的 。 巾 于 回归 测试 的 动作 和 用 例 是 完全 设计 好 的 ,测试 
期 望 的 结果 也 是 完全 可 以 预料 的 ,将 回归 测试 自动 运行 ,可 以 极 大 提高 测试 效率 ,缩短 回 
归 测 试 时 间 。 

综 上 所 述 , 虽 然 自动 化 测试 有 如 此 多 的 优点 ,那么 它 是 否 比 手工 测试 优越 ,可 以 完全 
代劳 手工 测试 的 所 有 工作 呢 ? 答案 是 否定 的 ,自动 化 测试 没有 想象 中 那么 优越 ,自动 化 测 
试 不 能 完全 替代 手工 测试 。 


8.1.3 自动 化 测试 的 缺点 


自动 化 测试 纵使 优点 很 多 ,但 手工 测试 也 有 其 不 可 替代 的 地 方 , 因 为 人 是 具有 超 强 罗 
辑 思 维和 判断 能 力 的 ,而 工具 是 相对 机 械 、 缺 乏 思维 能 力 的 东西 。 自 动 化 测试 具有 的 缺点 
和 问题 如 下 : 

(1) 自动 化 测试 不 能 取代 手工 测试 ,不 可 以 解决 遇 到 的 全 部 问题 。 

(2) 不 能 处 理 一 些 意外 的 情况 ,测试 工具 具有 局 限 性 。 

(3) 自动 化 测试 对 测试 质量 的 依赖 性 极 大 。 

(4) 界面 和 用 户 体验 测试 必须 依赖 手工 测试 ,因为 人 类 的 审美 观 和 心理 体验 是 工具 
不 可 模拟 的 。 

(5) 往往 手工 测试 比 自动 化 测试 发 现 的 缺陷 更 多 。 

(6) 测试 自动 化 不 能 提高 有 效 性 。 

(7) 测试 自动 化 可 能 会 制约 软件 开发 。 

(8) 由 于 自动 化 测试 比 手动 测试 更 脆弱 ,所 以 维护 会 受到 限制 。 
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(9) 在 测试 过 程 中 出 现 了 异常 ,机 器 不 会 主动 地 去 判断 。 

(10) 测试 工具 本 身 并 无 想象 力 ,不 能 主动 发 现 缺陷 。 

AD 如 果 缺 乏 测试 经 验 ,测试 的 组 织 差 .文档 少 或 不 一 致 , 则 自动 化 测试 的 效果 比 
较 差 。 

(12) 正确 性 的 检查 ,人 们 对 是 非 的 判断 和 逻辑 推理 能 力 是 工具 不 具备 的 。 

(13) 无 论 测 试 工具 多 么 好 ,都 不 可 以 解决 目前 遇 到 的 全 部 问题 。 

(14) 商用 测试 工具 是 由 销售 商 销售 软件 产品 ,销售 商 往往 不 具备 实时 解决 问题 的 能 
力 和 有 力 的 技术 服务 支持 ,因此 部 分 用 户 认为 测试 工具 不 能 很 好 地 测试 。 

(15) 测试 自动 化 实施 需要 管理 支持 及 组 织 艺术 ,必须 进行 选 型 .培训 和 实践 .普遍 使 
用 工具 。 


8.1.4 自动 化 测试 与 手工 测试 的 互补 性 


自动 化 测试 与 手工 测试 存在 互补 性 ,具体 表现 如 下 : 

(1) 自动 化 测试 更 适合 测试 重复 执行 机 械 化 的 计算 ,数值 比较 和 搜索 等 方面 。 

(2) 在 系统 功能 逻辑 测试 ,验收 测试 .适用 性 测试 .涉及 交互 性 测试 时 ,多 采用 手工 测 
试 方法 。 

(3) 单元 测试 .集成 测试 ,系统 负载 或 性 能 .可 靠 性 测试 等 比较 适合 采用 自动 化 测试 。 

(4) 对 那 种 不 稳定 、 开 发 周期 短 或 一 次 性 的 软件 等 不 适合 自动 化 测试 。 

(5) 测试 工具 本 身 缺 乏 想象 力 和 创造 性 ,自动 测试 只 能 发 现 15% 的 缺陷 ,而 手工 测试 
可 以 发 现 85% 的 缺陷 。 

总 之 ,我 们 既 要 充分 利用 自动 化 测试 工具 的 高 效率 来 帮助 测试 人 员 完 成 一 些 基 本 的 
测试 用 例 的 执行 ,从 而 实现 更 加 快速 的 回归 测试 .并 且 提 高 测试 的 覆盖 率 ; 同 时 ,也 不 要 放 
弃 手工 测试 ;要 自动 化 测试 和 手工 测试 并 重 。 


8.2 实施 自动 化 测试 


下 面 从 自动 化 测试 的 对 象 和 范围 .自动 功能 测试 的 脚本 开发 两 个 方面 介绍 如 何 实施 
自动 化 测试 。 


8.2.1 自动 化 测试 的 对 象 和 范围 


在 选择 自动 化 测试 方案 之 前 先 要 确定 自动 化 的 对 象 和 范围 ,然后 决定 采用 什么 样 的 
自动 化 测试 方案 ,进行 测试 脚本 开发 。 

在 产品 开发 过 程 中 ,需求 的 变更 是 很 常见 的 。 对 于 这 种 情况 ,要 自动 化 的 对 象 是 很 容 
易 确 定 的 。 自 动 化 应 该 考虑 需求 不 变 或 没有 变更 的 部 分 。 需 求 变更 一 般 会 影响 场景 和 新 
特性 ,不 会 影响 产品 的 基本 功能 。 在 自动 化 时 .要 首先 考虑 产品 的 这 类 基本 功能 。 

选择 最 合适 的 自动 化 测试 对 象 。 例 如 :压力 测试 .可 靠 性 测试 和 性 能 测试 这 些 类 型 的 
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测试 要 求 在 大 量 不 同 的 计算 机 上 以 一 定 的 持续 时 间 运 行 测试 用 例 ,比如 48 小 时 等 。 让 数 
百 个 用 户 天 天 使 用 产品 简直 就 是 不 可 能 的 ,他 们 既 不 愿意 承担 重复 性 工作 ,也 不 可 能 找到 
那么 多 有 所 需 技能 的 人 群 。 属 于 这 些 类 型 测试 的 测试 用 例 是 自动 化 的 第 一 候选 者 。 

回归 测试 是 重复 性 的 。 这 些 测试 用 例 在 产品 开发 各 个 阶段 要 执行 多 次 。 由 于 这 些 测 
试用 例 具有 重复 性 ,因此 自动 化 从 长 远 看 会 显著 节省 时 间 和 工作 量 。 此 外 ,正如 本 章 已 经 
提 到 过 的 ,所 节省 的 时 间 可 以 有 效 地 用 于 即兴 测试 和 其 他 更 具 创造 性 的 测试 。 

功能 测试 这 类 测试 可 能 需要 复杂 的 设置 ,因此 可 能 需要 当前 还 没有 普遍 具备 的 特殊 
技能 。 利 用 专家 的 技能 一 次 性 自动 化 这 些 测 试用 例 ,使 技能 不 那么 高 的 员工 也 可 以 马上 
运行 这 些 测 试用 例 。 

在 产品 开发 场景 中 ,很 多 测试 需要 重复 ,如 果 考 虑 了 定期 增强 和 维护 发 布 版 本 ,好 的 
品 会 有 很 长 的 生命 期 。 这 就 提供 了 自动 化 测试 用 例 在 发 布 周期 内 多 次 执行 的 机 会 。 根 
据 一 般 经 验 , 如 果 测 试用 例 在 不 久 的 将 来 ,比方 说 一 年 内 需要 执行 至 少 10 次 ,如 果 自 动 化 
测试 工作 量 不 超过 执行 这 些 测试 用 例 的 ТО 倍 ,那么 就 可 以 考虑 自动 化 这 些 测试 用 例 。 当 
然 ,这 只 是 根据 经 验 ,具体 选择 哪些 测试 用 例 还 有 很 多 因素 需要 考虑 ,例如 是 否 具 备 所 需 
的 技能 、 在 强大 的 发 布 日 期 压力 下 是 否 有 设计 自动 化 测试 脚本 的 时 间 、 工 具 的 成 本 .是 否 
有 所 需 的 支持 等 。 作 为 自动 化 测试 范围 的 总 结 ,就 是 要 选择 自动 化 测试 那些 能 够 以 最 少 
的 时 间 延 迟 换 得 最 大 投入 回报 的 工作 。 

投入 回报 也 是 需要 认真 考虑 的 一 个 方面 。 自 动 化 测试 工作 量 估计 要 向 管理 层 提供 预 
期 投入 回报 的 明确 结论 。 在 启动 自动 化 时 ,关注 点 应 该 放 在 好 的 排列 组 合 区 域 上 。 这 使 
自动 化 测试 能 够 用 较 少 的 代码 覆盖 较 多 的 测试 用 例 。 另 外 ,自动 化 测试 应 该 首先 考虑 需 
要 较 短 时 间 , 易 于 自动 化 的 测试 用 例 。 有 些 测 试用 例 没有 能 够 预先 确定 的 预期 结果 ,这 类 
测试 用 例 需 要 很 长 时 间 自 动 化 ,应 该 放 在 后 期 进行 。 这 可 以 满足 管理 层 寻求 自动 化 快速 
投入 回报 的 要 求 。 

重点 优先 的 原则 , 即 重要 的 关键 的 和 基本 功能 优先 进行 自动 化 测试 。 为 此 ,所 有 测试 
用 例 都 要 根据 客户 预期 分 为 高 、 中 、 低 优先 级 ,自动 化 测试 要 从 高 优先 级 的 测试 用 例 入 手 ， 
然后 覆盖 中 、 低 优先 级 需求 的 测试 用 例 。 


8.2.2 自动 功能 测试 的 脚本 开发 


自动 化 测试 与 普通 的 软件 开发 项 目 一 样 有 编码 阶段 。 自 动 化 测试 的 编码 阶段 主要 是 
通过 编写 测试 脚本 实现 所 设计 的 自动 化 测试 用 例 。 


1. 录制 与 回放 


测试 工程 师 使 用 录制 与 回放 的 方法 来 自动 地 测试 系统 的 流程 或 某 些 系统 测试 用 例 。 
市 场 上 几乎 所 有 的 测试 工具 都 具有 录制 与 回放 特性 。 测 试 工程 师 录 制 键盘 字符 或 鼠标 单 
击 的 行动 序列 ,并 在 以 后 按照 录制 的 顺序 回放 这 些 所 录制 的 脚本 。 由 于 所 录制 的 脚本 可 
以 回放 很 多 次 ,所 以 可 以 减少 测试 工作 。 除 了 可 以 避免 重复 工作 ,录制 和 保存 脚本 也 很 简 
单 。 但 是 这 样 做 也 有 一 些 缺点 ,脚本 中 可 能 包含 一 些 硬 编码 的 取 值 ,因此 很 难 执行 一 般 类 


202 


自动 化 测试 及 工具 


型 的 测试 ; 当 应 用 程序 变更 后 ,所 有 脚本 都 必须 重新 录制 ,因此 增加 了 测试 维护 的 成 本 。 
2. 结构 化 


结构 化 脚本 编写 方法 在 脚本 中 使 用 结构 控制 。 结 构 控制 让 测试 人 员 可 以 控制 测试 脚 
本 或 测试 用 例 的 流程 。 在 脚本 中 ,典型 的 结构 控制 是 使 用 if else 分 支 语句 ,switch 开关 语 
А] for 循环 、do while 循环 等 条 件 状 态 语句 来 帮助 实现 判定 ,实现 某 些 循环 任务 ,调用 其 
他 覆盖 普遍 功能 的 函数 。 


3. 数据 驱动 


数据 驱动 脚本 编写 方法 把 数据 从 脚本 分 离 出 去 ,存储 在 外 部 的 文件 中 。 这 样 ,脚本 就 
只 是 包含 编程 代码 了 。 这 在 测试 运行 时 要 改变 数据 的 情况 下 是 需要 的 。 这 样 ,脚本 在 测 
试 数据 改变 时 也 不 需要 修改 代码 。 有 时 候 ,测试 的 期 待 结果 值 也 可 以 跟 测 试 输 入 数据 一 
起 存储 在 数据 文件 中 。 


4. 关键 字 驱 动 


关键 字 驱 动 脚本 编写 方法 把 检查 点 和 执行 操作 的 控制 都 维护 在 外 部 数据 文件 。 因 
此 ,测试 数据 和 测试 的 操作 序列 控制 都 是 在 外 部 文件 中 设计 好 的 ,除了 常规 的 脚本 外 ,还 
需要 额外 的 库 来 翻译 数据 。 

5. 行为 驱动 

行为 驱动 这 种 技术 使 外 行 也 可 以 创建 自动 化 测试 的 测试 用 例 。 运 行 这 样 的 测试 用 例 
不 要 求 提供 输入 和 预期 输出 条 件 。 应 用 程序 中 出 现 的 所 有 行动 都 会 以 自动 化 定义 的 一 般 
控件 集 为 基础 进行 自动 化 测试 。 行 动 集 表示 为 对 象 ,可 以 重用 这 些 对 象 。 用 户 只 需要 描 
述 操作 (例如 登录 .下 载 等 ) ,其 他 所 需 的 一 切 都 会 自动 生成 和 使 用 。 输 入 和 输出 条 件 会 自 
动 生成 和 使 用 。 使 用 测试 自动 化 工具 ,测试 执行 的 场景 可 以 使 用 测试 框架 动态 变更 。 行 
为 驱动 脚本 编写 方法 包含 两 个 主要 因素 : 测试 用 例 自动 化 和 框架 设计 。 

总 之 ,对 于 开发 的 成 本 来 说 , 随 着 脚本 编写 方法 从 录制 回放 到 行为 驱动 的 改变 而 不 断 
地 增加 ;对 于 维护 的 成 本 来 说 , 随 着 脚本 编写 方法 从 录制 回放 到 行为 驱动 的 改变 而 在 降 
低 。 对 于 编程 技能 要 求 来 说 , 随 着 脚本 编写 方法 从 录制 回放 到 行为 驱动 的 改变 ,对 一 个 测 
试 员 的 编程 熟练 程度 的 要 求 在 增加 。 对 于 设计 和 管理 的 需要 来 说 , 随 着 脚本 编写 方法 从 
录制 回放 到 行为 驱动 的 改变 ,设计 和 管理 自动 化 测试 项 目的 要 求 在 增加 。 因 此 ,应 该 合理 
地 选择 自动 化 测试 脚本 开发 方法 ,在 适当 的 时 候 、 适 当 的 地 方 使 用 适当 的 脚本 开发 方法 。 


8.3 自动 化 测试 工具 的 选择 与 比较 
随 着 人 们 对 测试 工作 的 重视 以 及 测试 工作 的 不 断 深入 , 越 来 越 多 的 公司 开始 使 用 自 


动 化 测试 工具 。 如 果 能 够 正确 地 选择 和 使 用 自动 化 测试 工具 ,就 会 提高 测试 的 效率 和 测 
试 质量 ,降低 测试 成 本 。 由 于 一 些 商 用 的 自动 化 测试 工具 十 分 昂贵 ,因此 在 选择 自动 化 测 
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试 工具 时 ,要 把 各 种 因素 考虑 进去 ,只 有 这 样 才能 做 出 正确 的 选择 。 
自动 化 测试 工具 国内 外 有 很 多 ,可 以 将 工具 分 为 白 盒 测试 工具 、 黑 盒 测试 工具 和 测试 
管理 工具 三 大 类 。 自 动 化 测试 工具 与 软件 测试 过 程 的 关系 如 图 8-1 所 示 。 


КЕНЕС: 
白 盒 测 试 工具 Wi 
EN 
静态 测试 工具 | [动态 测试 工具 集成 
一 测试 
测试 管理 工具 HAMRIA 
测试 管理 工具 AMR L ja 
性 能 测试 工具 | | 功能 测试 工具 | 。 | 测试 
其 他 
其 他 测试 工具 е 


图 8-1 自动 化 测试 工具 与 软件 测试 过 程 的 关系 图 


8.3.1 白 盒 测试 工具 


白 盒 测试 工具 一 般 是 针对 代码 进行 测试 的 工具 ,测试 中 发 现 的 缺陷 可 以 定位 到 代码 
级 。 白 盒 测 试 工具 多 用 于 单元 测试 阶段 。 白 盒 测试 工具 的 测试 原理 是 : 用 测试 工具 对 被 
测 程序 进行 编译 .连接 ,生成 可 执行 程序 。 在 这 个 过 程 中 ,工具 会 向 被 测 代 码 中 搬 和 人 检测 
代码 ,然后 运行 生成 的 可 执行 程序 ,执行 测试 用 例 。 在 程序 运行 的 过 程 中 ,工具 会 在 后 台 
通过 插入 被 测 程序 的 检测 代码 收集 程序 中 的 动态 错误 .代码 执行 时 间 覆盖 率 信息 。 在 退 
出 程序 后 ,工具 将 收集 到 的 各 种 数据 显示 出 来 ,以 供 分 析 。 

白 盒 测 试 工具 多 为 一 个 套件 ,其 中 包含 了 动态 错误 检测 、. 时 间 性 能 分 析 、 覆 盖 率 统计 
等 多 个 工具 。 

动态 错误 检测 工具 用 来 检查 代码 中 类 似 于 内 存 泄露 .数组 访问 越界 这 样 的 程序 错误 。 
其 典型 代表 是 Rational Suite Enterprise 套件 中 的 Purify 测试 工具 。 

时 间 性 能 测试 工具 记录 被 测 程序 的 执行 时 间 。 其 典型 代表 是 Rational Suite 
Enterprise 套件 中 的 Quantify 测试 工具 。 

覆盖 率 统计 工具 统计 出 人 们 当前 执行 的 测试 用 例 对 代码 的 覆盖 率 。 保 证 单元 测试 的 
全 面 性 。 其 典型 代表 是 Rational Suite Enterprise 套件 中 的 Coverage 测试 工具 。 

ІВМ 公司 的 白 盒 测试 工具 如 表 8-1 所 示 ,Compuware 公司 的 白 盒 测试 工具 如 表 8-2 


所 示 。 
表 8-1 IBM 公司 的 白 盒 测 试 工具 
I R 名 支持 语言 环境 介 绍 
Purify Visual С/С ++, Java 内 存 错 误 检测 
PureCoverage УС, УВ, Јауа 测试 覆盖 程度 检测 
Quantify VC, VB,Java 测试 性 能 瓶颈 检测 
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表 8-2 Compuware 公司 的 白 盒 测试 工具 


I R 名 支持 语言 环境 介 ЕЗ 

FailSafe Visual Basic 自动 缺陷 处 理 和 人 恢复 系统 

TrueCoverage C++, Java, Visual Basic 函数 调用 次 数 、 所 占 比率 统计 和 稳定 性 跟踪 
SmartCheck Visual Basic 函数 调用 次 数 、 所 占 比 率 统计 和 稳定 性 跟踪 
TrueTime С++, Java, Visual Basic 代码 运行 效率 检查 和 组 件 性 能 的 分 析 


8.5.2 黑 盒 测试 工具 


黑 盒 测试 工具 的 原理 是 利用 脚本 的 录制 (Record) 和 回放 (Playback) ,模拟 用 户 的 操 
NE ,然后 将 被 测 系统 的 输出 记录 下 来 同 预先 给 定 的 标准 结果 比较 。 录 制 就 是 记录 下 对 软 
件 的 操作 过 程 ;回放 就 是 像 播放 电影 一 样 重 放 录 制 的 操作 。 录 制 只 是 实现 了 测试 输入 的 
自动 化 。 一 个 完整 的 测试 用 例 由 输入 和 预期 输出 共同 组 成 。 脚 本 录制 好 了 ,也 加 入 了 检 
验 点 ,一 个 完整 的 测试 用 例 已 经 被 自动 化 了 。 但 假如 还 想 对 脚本 的 执行 过 程 进行 更 多 的 
控制 ,那么 就 要 对 录制 的 脚本 进行 编程 。 

黑 盒 测试 工具 可 以 大 大 减轻 黑 盒 测 试 的 工作 量 , 在 迭代 开发 的 过 程 中 ,能 够 很 好 地 进 
行 回归 测试 。 黑 盒 测 试 工具 包括 功能 测试 工具 和 性 能 测试 工具 。 黑 盒 测试 工具 的 代表 有 
ІВМ 公司 Rational 的 TeamTest, Robot, Compuware 公司 的 QACenter, WinRunner, 9 
外 ,专用 于 性 能 测试 的 工具 包括 Radview 公司 的 WebLoad, Microsoft 公司 的 WebStress 
等 工具 。 一 些 黑 盒 测试 工具 如 表 8-3 所 示 。 


表 8-3 一 些 黑 盒 测试 工具 


工 具 名 х я 网 址 
Robot IBM Rational http://www. rational. com 
TeamTest IBM Rational http://www. rational. com 
QACenter Compuware http://www. mercuryinteractive. com 
WinRunner Compuware http://www. mercuryinteractive. com 
LoadRunner Compuware http://www. mercuryinteractive. com 
Silkperformer Segue http://www. segue. com 
SilkTest Segue http://www. segue. com 
WAS Microsoft http://www. microsoft. com 


黑 盒 测 试 工具 又 分 为 功能 测试 工具 和 人 性 能 测试 工具 。 
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1. 功能 测试 工具 


功能 测试 工具 主要 用 于 检测 被 测 程序 能 否 达 到 预期 的 功能 要 求 并 能 正常 运行 。 功 能 
测试 工具 一 般 采 用 脚本 录制 (Record)/ 回 放 (Playback) 原 理 ,模拟 用 户 的 操作 ,然后 将 被 
测 系 统 的 输出 记录 下 来 ,并 同 预 先 给 定 的 标准 结果 进行 比较 。 在 回归 测试 中 使 用 功能 测 
试 工具 ,可 以 大 大 减轻 测试 人 员 的 工作 量 ,提高 测试 效果 。 功 能 测试 工具 不 太 适 合 于 版 本 
变动 较 大 的 软件 。 

主流 的 黑 盒 功 能 测试 工具 包括 Mercury Interactive 公司 的 WinRunner, QTP, IBM 
Rational 公司 的 TeamTest 和 Robot,Compuware 公司 的 QACenter 等 。 


2. 性 能 测试 工具 


性 能 测试 工具 主要 用 于 确定 软件 和 系统 性 能 。 一 般 通 过 模拟 上 千 万 用 户 实施 并 发 负 
载 及 实时 性 能 监测 的 方式 来 确认 和 查找 问题 。 目 前 普遍 使 用 的 负载 测试 工具 有 
QALoad Load Runner 等 。 

性 能 测试 工具 对 软件 系统 的 性 能 进行 测试 时 ,大 体 分 为 以 下 几 个 步骤 。 

(1) 录制 软件 产品 中 要 对 其 进行 性 能 测试 的 功能 部 分 的 操作 过 程 。 功 能 录制 结束 
后 ,会 形成 与 操作 相对 应 的 测试 脚本 。 

(2) 根据 具体 的 测试 要 求 , 对 脚本 进行 修改 ,对 脚本 运行 的 过 程 进 行 设置 ,如 设置 并 
发 的 用 户 数量 网 络 的 带宽 等 ,使 脚本 运行 的 环境 与 人 们 实际 要 模拟 的 测试 环境 一 致 。 

(3) 运行 测试 脚本 。 


8.3.3 测试 管理 工具 


测试 管理 工具 是 指 帮助 完成 制定 测试 计划 ,跟踪 测试 运行 结果 等 的 工具 。 测 试管 理 
工具 主要 对 软件 缺陷 、 测 试 计划 、 测 试用 例 、 测 试 实施 进行 管理 。 一 个 小 型 软件 项 目 可 能 
有 数 千 个 测试 用 例 要 执行 ,使 用 捕获 /回放 工具 可 以 建立 测试 并 使 其 自动 执行 ,但 仍 需 要 
测试 管理 工具 对 成 千 上 万 个 杂乱 无 章 的 测试 用 例 进行 管理 。 

测试 管理 工具 的 代表 有 Rational 公司 的 Test Manager、Compureware 公司 的 
TrackRecord 等 软件 。 

缺陷 跟踪 工具 是 管理 工具 使 用 最 多 的 。 选 择 缺 陷 跟 踪 工具 的 方法 如 下 : 

(1) 使 用 Word, Excel 等 类 型 的 文档 处 理 软件 。 

(2) 自行 设计 开发 一 套 管理 软件 。 

СЗ) 购买 商业 性 的 软件 。 

(4) 下 载 一 套 适合 自己 的 开源 软件 ,自行 配置 和 维护 。 

一 些 测试 管理 工具 如 表 8-4 所 示 。 
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表 8-4 测试 管理 工具 


工 具 名 公 司 介 绍 

TestDirector Mercury 提供 测试 需求 ,测试 计划 ,缺陷 管理 

Test Manager Rational 提供 测试 计划 测试 评估 测试 报告 .测试 用 例 与 需求 
ClearQuest Rational 缺陷 和 变更 跟踪 

Bugzilla Mozilla 免费 的 缺陷 管理 工具 

TrackRecord Compuware 缺陷 管理 工具 


8.3.4 常用 自动 化 测试 工具 


1. WinRunner 


Mercury Interactive 公司 的 WinRunner 是 一 种 企业 级 的 功能 测试 工具 ,用 于 检测 应 
用 程序 是 否 能 够 达到 预期 的 功能 及 正常 运行 。 通 过 自动 录制 .检测 和 回放 用 户 的 应 用 操 
作 ,WinRunner 能 够 有 效 地 帮助 测试 人 员 对 复杂 的 企业 级 应 用 的 不 同 发 布 版 进行 测试 ， 
提高 测试 人 员 的 工作 效率 和 质量 ,确保 跨 平台 的 、 复 杂 的 企业 级 应 用 无 故障 发 布 及 长 期 稳 
定 运行 。 

WinRunner 的 特点 : 与 传统 的 手工 测试 相 比 能 快速 ,批量 地 完成 功能 点 测试 ;能 针对 
相同 测试 脚本 ,执行 相同 的 动作 ,从 而 消除 人 工 测试 所 带 来 的 理解 上 的 误差 ;此 外 , 它 还 能 
重复 执行 相同 动作 ,测试 工作 中 最 枯燥 的 部 分 可 交 由 机 器 完成 ; 它 支持 程序 风格 的 测试 脚 
本 ,一 个 高 素质 的 测试 工程 师 能 借助 它 完成 流程 极为 复杂 的 测试 ,通过 使 用 通配符 、 宏 、 条 
件 语句 、 循 环 语句 等 ,还 能 较 好 地 完成 测试 脚本 的 重用 ; 它 针 对 于 大 多 数 编程 语言 
Windows 技术 ,提供 了 较 好 的 集成 .支持 环境 ,这 对 基于 Windows 平台 的 应 用 程序 实施 
功能 测试 而 言 带 来 了 极 大 的 便利 。 

企业 级 应 用 可 能 包括 Web 应 用 系统 、ERP 系统 .CRM 系统 等 。 这 些 系统 在 发 布 之 
前 ,升级 之 后 都 要 经 过 测试 ,确保 所 有 功能 都 能 正常 运行 ,没有 任何 错误 。 如 何 有 效 地 测 
试 不 断 升级 更 新 且 不 同 环境 的 应 用 系统 ,是 每 个 公司 都 会 面临 的 问题 。 

WinRunner 的 主要 功能 如 下 : 

(1) 轻松 创建 测试 ; 

(2) 插入 检查 点 ; 

(3) 检验 数据 ; 

(4) 增强 测试 ; 

(5) 运行 测试 ; 

(6) 分 析 结 果 ; 

(7) 维护 测试 。 
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2. LoadRunner 


Mercury Interactive 的 LoadRunner 是 一 种 适用 于 企业 级 系统 、 各 种 体系 架构 的 自动 
负载 测试 工具 ,通过 模拟 实际 用 户 的 操作 行为 和 实行 实时 性 能 监测 ,帮助 更 快 地 查找 和 发 
现 问题 ,预测 系统 行为 并 优化 系统 性 能 。 通 过 使 用 LoadRunner, 企 业 能 最 大 限度 地 缩短 
测试 时 间 ,优化 性 能 和 加 速 应 用 系统 的 发 布 周期 。 此 外 ,LoadRunner 能 支持 广泛 的 协议 
和 技术 ,为 一 些 特殊 环境 提供 特殊 的 解决 方案 。 

Load Runner 特点 如 下 : 

(1) 创建 虚拟 用 户 ; 

(2) 创建 真实 的 负载 ; 

(3) 定位 性 能 问题 ; 

(4) 分 析 结 果 以 精确 定位 问题 ; 

(5) 重复 测试 保证 系统 发 布 的 高 性 能 ; 

(6) Enterprise Java Beans 的 测试 ; 

(7) 支持 无 线 应 用 协议 ; 

(8) 支持 Media Stream 应 用 。 


3. Кайопа! Robot 


Rational Robot 是 业界 最 顶尖 的 功能 测试 工具 , 它 甚 至 可 以 在 测试 人 员 学 习 高 级 脚 
本 技术 之 前 帮助 其 进行 成 功 的 测试 。 它 集成 在 测试 人 员 的 桌面 IBM Rational Test 
Manager 上 ,在 这 里 测试 人 员 可 以 计划 组织、 执行 .管理 和 报告 所 有 测试 活动 ,包括 手动 
测试 报告 。 这 种 测试 和 管理 的 双重 功能 是 自动 化 测试 的 理想 开始 。 

Rational Robot 可 以 对 在 各 种 独立 开发 环境 中 开发 的 应 用 程序 ,创建 、 修 改 并 执行 功 
能 测试 .分 布 式 功能 测试 .回归 测试 以 及 整合 测试 ,记录 并 回放 能 识别 业务 应 用 程序 对 象 
的 测试 脚本 ,可 以 快速 ` 有 效 地 跟踪 .报告 与 质量 保证 测试 相关 的 所 有 信息 ,并 将 这 些 信 息 
绘制 成 图 表 。 

Rational Robot 是 一 个 面向 对 象 的 软件 测试 工具 ,主要 针对 Web、ERP 和 С/5 进行 
功能 自动 化 测试 。 可 以 降低 在 功能 测试 上 的 人 力 和 物力 的 投入 成 本 和 风险 ,测试 包括 可 
见 的 和 不 可 见 的 对 象 。Rational Robot 可 以 开发 运用 三 种 测试 脚本 : 用 于 功能 测试 的 
GUI 脚本 .用 于 性 能 测试 的 VU 以 及 VB 脚本 。 

Rational Robot 的 主要 功能 如 下 : 

(1) 执行 完整 的 功能 测试 。 记 录 和 回放 遍历 应 用 程序 的 脚本 以 及 测试 在 查证 点 处 的 
对 象 状 态 。 

(2) 执行 完整 的 性 能 测试 。 通 过 Rational Robot 与 Rational Test Manager 的 协作 可 
以 记录 和 回放 脚本 ,这 些 脚本 帮助 断定 多 客户 系统 在 不 同 负载 情况 下 是 否 能 够 按照 用 户 
定义 的 标准 运行 。 

(3) 在 SQA Basic, VB, VU 多 种 环境 下 创建 并 编辑 脚本 。Rational Robot 编辑 器 提 
供 有 色 代 码 命令 ,并 在 集成 脚本 开发 阶段 提供 键盘 帮助 。 
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(4) 测试 微软 IDE 环境 下 VB, HTML, Java, Oracle Forms, PowerBuilder, Delphi , FF 
发 的 应 用 程序 以 及 用 户 界 面 上 看 不 见 的 那些 对 象 。 

(5) 脚本 回放 阶段 收集 应 用 程序 诊断 信息 。Rational Robot 与 Rational Purify 
Quantify PureCoverage 集成 ,可 以 通过 诊断 工具 回放 脚本 ,并 在 日 志 中 查看 结果 。 


4. ОАСепіег 


QACenter 是 黑 盒 测试 工具 , 它 可 以 帮助 测试 人 员 创 建 一 个 快速 、 可 重用 的 测试 过 
程 。 该 测试 工具 能 够 自动 帮助 管理 测试 过 程 .快速 分 析 和 调试 程序 ,能 够 针对 回归 测试 、 
强度 测试 .单元 测试 .并 发 测试 集成 测试 移植 测试 容量 和 负载 测试 建立 测试 用 例 ,自动 
执行 测试 并 产生 相应 的 测试 文档 。 

QACenter 测试 工具 主要 包括 以 下 几 个 模块 。 

1) QARun 

QARun 主要 用 于 客户 端 /服务 器 系统 中 对 客户 端的 功能 测试 。 在 功能 测试 中 ,主要 
包括 对 系统 的 GUI 进行 测试 以 及 对 客户 端 事务 逻辑 进行 测试 。QARun 的 测试 实现 方法 
是 通过 鼠标 移动 .键盘 单 击 活动 操作 被 测 系统 ,得 到 相应 的 脚本 ,并 对 脚本 进行 编辑 和 调 
试 。 在 记录 过 程 中 针对 被 测 系统 中 所 包含 的 功能 点 进行 基线 的 建立 ,也 就 是 说 在 插入 检 
查 点 的 同时 建立 期 望 输出 值 。 一 般 情况 下 ,检查 点 在 QARun 提示 目标 系统 执行 一 系列 
事件 之 后 被 执行 ,检查 点 可 以 确定 实际 结果 与 期 望 结 果 是 否 相同 。 

2) QALoad 

QALoad 是 强 负载 下 应 用 的 性 能 测试 工具 。 它 主要 检测 系统 负载 能 力 , 支 持 范 围 广 、 
测试 内 容 多 。 该 工具 能 够 帮助 测试 人 员 、 开 发 人 员 和 系统 管理 人 员 对 于 分 布 式 系统 的 被 
测 程序 进行 有 效 的 负载 测试 。 负 载 测 试 能 够 模拟 大 量 的 用 户 并 发 活动 ,从 而 发 现 大 用 户 
负载 下 对 C/S 系统 的 影响 。 

3) QADirector 

QADirector 是 测试 的 组 织 设计 和 创建 以 及 管理 工具 。 它 提供 应 用 系统 管理 框架 ,使 
开发 者 和 QA 工作 组 将 所 有 测试 阶段 组 合 在 一 起 ,从 而 最 有 效 地 使 用 现 有 测试 资料 ,测试 
方法 和 应 用 测试 工具 。QADirector 使 用 户 能 够 自动 地 组 织 测 试 资料 ,建立 测试 过 程 ,以 
便 对 多 种 情况 和 条 件 进 行 测试 。 按 正确 的 次 序 执行 多 个 测试 脚本 ,记录 、 跟 踪 、 分 析 和 记 
录 测 试 结 果 ,并 与 多 个 并 发 用 户 共享 测试 信息 。 


5. Telelogic TAU 


TAU 第 二 代 包 含 三 个 最 新 的 .最 强大 的 技术 用 来 加 速 大 规模 软件 开发 和 测试 : 统一 
建 模 语言 (UML) 及 它 的 许多 最 新 修订 版 本 中 的 特性 ,UML2. 0; 功 能 强大 的 测试 语言 
TTCN-3 和 新 的 构造 系统 的 方法 : Model Driven Architecture( 模 型 驱动 构架 )。 这 三 个 
新 的 业界 标准 结合 成 TAU 的 已 经 过 认可 的 软件 开发 平台 ,形成 了 一 个 系统 ,一 个 一 流 的 
稳定 可 靠 的 工具 解决 方案 。TAU 第 二 代 是 系统 与 软件 开发 解决 方案 的 一 个 突破 , 它 把 
业界 从 使 用 了 太 长 时 间 的 手工 、 易 出 错 、 以 代码 为 中 心 的 方法 中 释放 出 来 ,自然 而 然 地 迈 
向 下 一 步 , 一 个 更 加 可 视 化 、 自 动 化 及 可 靠 的 开发 方法 。Telelogic TAU/Tester 是 基于 
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通用 测试 语言 TTCN-3, 用 于 自动 化 的 系统 和 集成 测试 的 强大 工具 。TAU/Tester 以 现 
代 化 的 开发 工具 为 基础 ,提供 高 层 测试 功能 ,支持 整个 测试 生命 周期 ,加 速 自动 化 测试 。 
TAU/Tester 可 使 用 户 特别 关注 于 测试 的 开发 ,因为 TTCN-3 语言 是 独立 于 开发 语言 或 
测试 设备 的 , 且 是 抽象 和 可 移植 的 。 


6. TestDirector 


TestDirector 是 一 套 测试 管理 软件 。 可 以 使 用 它 来 规范 科学 的 测试 管理 流程 ,建立 
起 针对 项 目的 测试 方案 和 计划 ,消除 组 织 机 构 间 、 地 域 间 的 障碍 ,让 测试 人 员 、 开 发 人 员 或 
其 他 的 IT 人 员 通 过 一 个 中 央 数据 仓库 ,在 不 同 地 方 就 能 交互 测试 信息 。TestDirector 将 
测试 过 程 流水 化 一 一 从 测试 需求 管理 ,到 测试 计划 ,测试 日 程 安排 ,测试 执行 到 出 错 后 的 
错误 跟踪 一 一 仅 在 一 个 基于 浏览 器 的 应 用 中 便 可 完成 ,而 不 需要 每 个 客户 端 都 安装 一 套 
客户 端 程序 。 

(1) 需求 管理 。 程 序 的 需求 驱动 整个 测试 过 程 。TestDirector 的 Web 界面 简化 了 这 
些 需求 管理 过 程 , 以 此 可 以 验证 应 用 软件 的 每 一 个 特性 或 功能 是 否 正常 。 通 过 提供 一 个 
比较 直观 的 机 制 将 需求 和 测试 用 例 测试 结果 和 报告 的 错误 联系 起 来 ,从 而 确保 能 达到 最 
高 的 测试 覆盖 率 。 

(2) 测试 计划 的 制定 。 其 Test Plan Manager 指导 测试 人 员 如 何 将 应 用 需求 转换 为 
具体 的 测试 计划 ,组 织 起 明确 的 任务 和 责任 ,并 在 测试 计划 期 间 为 测试 小 组 提供 关键 要 点 
和 Web 界面 来 协调 团队 间 的 沟通 。 

(3) 人 工 与 自动 化 测试 的 结合 。 多 数 的 测试 项 目 需要 人 工 与 自动 化 测试 结合 ,启用 
一 个 自动 化 切换 机 制 ,能 让 测试 人 员 决定 哪些 重复 的 人 工 测 试 可 转变 为 自动 脚本 以 提高 
测试 速度 。TestDirector 还 能 简化 将 人 工 测试 切换 到 自动 化 测试 脚本 的 转换 ,并 可 立即 
启动 测试 设计 过 程 。 

(4) 安排 和 执行 测试 。 一 旦 测试 计划 建立 后 ,TestDirector 的 测试 实验 室 管理 为 测试 
日 程 制订 提供 一 个 基于 Web 的 框架 。 其 Smart Scheduler 能 根据 测试 计划 中 创立 的 指标 
对 运行 的 测试 执行 监控 ,能 自动 分 辩 是 系统 还 是 应 用 错误 ,然后 将 测试 切换 到 网 络 的 其 他 
机 器 。 使 用 Graphic Designer 图 表 设 计 , 可 以 很 快 地 将 测试 分 类 以 满足 不 同 的 测试 目的 ， 
如 功能 性 测试 .负载 测试 .完整 性 测试 等 。 

(5) 缺陷 管理 。TestDirector 的 出 错 管理 直接 贯穿 作用 于 测试 的 全 过 程 , 从 最 初 发 现 
问题 ,到 修改 错误 ,再 到 验证 修改 结果 。 利 用 出 错 管 理 , 测 试 人 员 只 需 进 入 一 个 URL ,就 
可 汇报 和 更 新 错误 ,过 滤 整 理 错误 列表 并 作 趋 势 分 析 。 

(6) 图 形 化 和 报表 输出 。TestDirector 常规 化 的 图 表 和 报告 帮助 对 数据 信息 进行 分 
析 ,还 以 标准 的 HTML 或 Word 形式 提供 生成 和 发 送 正式 测试 报告 。 测 试 分 析 数 据 还 可 
简便 地 输入 到 标准 化 的 报告 工具 ,如 Excel, ReportSmith, CrystalReports 和 其 他 类 型 的 
第 三 方 工具 。 


7. AdventNet QEngine 


AdventNet QEngine 是 一 个 应 用 广泛 且 独 立 于 平台 的 自动 化 软件 测试 工具 ,可 用 于 
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Web 功能 测试 .Web 性 能 测试 Java 应 用 功能 测试 Java API 测试 .SOAP 测试 .回归 测试 
和 Java 应 用 性 能 测试 。 支 持 对 于 使 用 HTML, JSP, АӨР,. NET, PHP, JavaScript/ 
VBScript, XML, SOAP, WSDL, e-commerce, 传统 客户 端 /服务 器 等 开发 的 应 用 程序 进行 
测试 。 此 工具 以 Java 开发 ,因此 便于 移植 和 提供 多 平台 支持 。 


8. SilkTest 


SilkTest 是 业界 领先 的 ,用 于 对 企业 级 应 用 进行 功能 测试 的 产品 ,可 用 于 测试 Web, 
Java 或 是 传统 的 C/S 结构 。SilkTest 提供 了 许多 功能 ,使 用 户 能 够 高 效率 地 进行 软件 自 
动 化 测试 。 这 些 功 能 包括 测试 的 计划 和 管理 ; 直接 的 数据 库 访问 及 校 验 ;灵活 、 强 大 的 
4Test 脚本 语言 ,内 置 的 恢复 系统 (Recovery System) ;以 及 具有 使 用 同一 套 脚 本 进行 跨 平 
台 . 跨 浏 览 器 和 技术 进行 测试 的 能 力 。 


9. PureCoverage 


PureCoverage 是 一 个 面向 УС.УВ 或 者 Java 开发 的 测试 覆盖 程度 检测 工具 , 它 可 以 
自动 检测 你 的 测试 完整 性 和 那些 无 法 达到 的 部 分 。 

PureCoverage 的 主要 功能 如 下 : 

(1) 即时 代码 测试 百分比 显示 ; 

(2) 未 测试 或 测试 不 完整 的 函数 、 过 程 或 者 方法 的 状态 表示 ; 

(3) 在 源 代码 中 定位 未 测试 的 特定 代码 行 。 

PureCoverage 默认 显示 未 测试 代码 为 红色 ,已 测试 代码 蓝 色 , 而 死 状 态 行 (通常 是 函 
数 、 过 程 或 者 方法 中 的 非 活 动 代码 部 分 ) 为 黑色 。 


10. JUnit 


JUnit 由 Erich Gamma ЖІ Kent Beck 编写 .下 载 网 址 http://www. junit. orte JUnit 
共有 六 个 包 , 其 中 最 核心 的 包 是 Framework, Runner 和 Textui, JUnit. Framework 是 测 
试 构架 ,包含 了 JUnit 测试 类 所 需 的 所 有 基 类 ;junit. runner 负责 测试 驱动 的 全 过 程 ; 
junit. textui 负责 文字 方式 的 用 户 交 互 。 

JUnit 用 于 单元 级 测试 的 开放 式 框架 ,具有 如 下 优势 : 

Q) JUnit 完全 免费 。JUnit 是 公开 源 代码 ,可 以 进行 二 次 开发 。 

(2) 使 用 方便 。JUnit 可 以 快速 地 撰写 测试 并 检测 程序 代码 , 随 着 程序 代码 增加 测试 
用 例 ,JUnit 执行 测试 类 似 编 译 程序 代码 一 样 容易 。 

(3) JUnit 检验 结果 并 提供 立即 回馈 。JUnit 自动 执行 并 且 检 查 结果 ,执行 测试 后 获 
得 简单 回馈 ,不 需要 人 工 检查 测试 结果 报告 。 

(4) JUnit 合成 测试 系列 的 层级 架构 。JUnit 把 测试 组 织 成 测试 系列 ,允许 组 合 多 个 
测试 并 自动 的 回归 整个 测试 系列 ,Junit 与 Ant 结合 实施 增 量 开发 和 自动 化 测试 。 

(5) JUnit 提升 软件 的 稳定 性 。JUnit 使 用 小 版 本 发 布 , 控 制 代码 更 改 量 。 同 时 , 引 
和 了 重 构 概 念 ,提高 软件 代码 质量 。 

(6) 与 IDE 的 集成 。 与 Java 相关 的 IDE 环境 集成 ,形成 测试 及 开发 代码 之 间 无 颖 
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连接 。 
11. QC 


НР 的 Quality Center(QC) 是 基于 Web 的 系统 ,用 于 各 种 IT 环境 和 应 用 环境 中 的 
自动 软件 质量 测试 。QC 专门 用 于 优化 关键 质量 控制 活动 (包括 需求 .测试 与 缺陷 管理 、 
功能 测试 和 业务 流程 测试 ) ,并 使 其 实现 自动 化 。QC 包括 Test Director for Quality 
Center, Quick Test Professional, Win Runner 和 新 型 HP Business Process Testing 等 
产品 。 

QC 特点 如 下 : 

(1) QC 有 助 于 维护 测试 的 项 目 数据 库 , 这 个 数据 库 涵盖 了 应 用 程序 功能 的 各 个 方 
її. 将 Quality Center 链接 到 电子 邮件 系统 ,所 有 应 用 程序 开发 质量 保证 、 客 户 支 持 和 
信息 系统 人 员 可 以 共享 缺陷 跟踪 信息 。 

(2) QC 可 以 集成 HP-Mercury 的 其 他 测试 工具 (如 Load Runner 和 Visual API- 
XP) 以 及 第 三 方 或 者 自 定义 测试 工具 和 配置 管理 工具 。Quality Center 可 以 无 颖 地 与 所 
集成 的 测试 工具 进行 通信 ,提供 一 种 完整 的 解决 方案 ,使 应 用 程序 测试 完全 自动 化 。 

(3) QC 可 指导 软件 测试 人 员 完 成 测试 流程 的 需求 指定 、 测 试 计划 、 测 试 执行 和 缺陷 
跟踪 。 它 把 应 用 程序 测试 中 所 涉及 的 全 部 任务 集成 起 来 ,有 助 于 确保 能 够 得 到 最 高 质量 
的 应 用 程序 。 


8.3.5 自动 化 测试 工具 QTP 


1. ОТР 


QuickTest Professional(QTP) 是 Мегсигу InteractiveC(MI) 公司 开 发 的 一 种 自动 测 
WTH. Mercury 公司 后 被 美国 惠普 公司 收购 ,2012 4 12 月 20 日 发 布 的 版 本 为 HP 
QuickTest Professional。 使 用 QTP 的 目的 用 它 来 执行 重复 的 手动 测试 ,主要 是 用 于 回 
归 测 试 和 测试 同一 软件 的 新 版 本 。 因 此 在 测试 前 要 考虑 好 如 何 对 应 用 程序 进行 测试 , 例 
如 要 测试 那些 功能 、 操 作 步 又 .输入 数据 和 期 望 的 输出 数据 等 。 


2. QTP 的 特点 和 优势 


ОТР 具有 的 主要 特点 如 下 : 

(1) ОТР 是 一 个 侧重 于 功能 的 回归 自动 化 测试 工具 ;提供 了 很 多 插件 分 别 用 于 各 自 
类 型 的 产品 测试 。 默 认 提 供 Web ActiveX 和 УВ, 

(2) ОТР 支持 的 脚本 语言 是 VBScript,VBScript 是 一 种 松散 的 、 非 严格 的 、 普 及 面 很 
广 的 语言 。 

(3) QTP 支持 录制 和 回放 的 功能 。QTP 编辑 器 支持 两 种 视图 : Keyword 模式 和 
Expert 模式 。 

(4) QTP 通过 三 类 属性 来 识别 对 象 , 即 Mandatory, Assitive 和 Ordinal identifiers, 
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(5) Action 是 QTP 组 织 测试 用 例 的 具体 形式 ,拥有 自己 的 DataTable 和 Object 
Repository, X ff Input 和 Output 参数 。Action 可 以 设置 为 share 类 型 的 ,这 样 可 以 被 其 
他 test 中 的 Action 调用 。 

(6) QTP 提供 Excel 形式 的 数据 表格 DataTable, 可 以 用 来 存放 测试 数据 或 参数 。 

(7) 环境 变量 。 在 一 个 测试 中 ,环境 变量 可 以 被 当前 测试 中 所 有 Action 共享 。 环 境 
变量 也 有 两 种 类 型 : build in 和 user defined。 用 户 自 定义 的 环境 变量 可 以 指向 一 个 
XML 文件, 这样 可 以 实现 在 众多 test 之 间 共 享 变量 。 

(8) QTP 和 被 测 系统 必须 在 同一 台 机 器 上 运行 。 

(9) QTP 对 外 提供 了 大 量 的 API 和 对 象 , 可 以 利用 这 些 通 过 编写 Scripts 实现 测试 
的 操作 ,配置 .运行 和 管理 完全 自动 化 。 

(10) 用 QTP 编写 的 测试 代码 ,必须 在 QTP 上 运行 。 

ОТР 具有 的 优势 如 下 : 

(1) ОТР 甚至 可 以 使 新 测试 人 员 在 很 短 的 时 间 内 提高 效率 。 只 需 通过 单 击 “记录 ” 
按钮 ,并 使 用 执行 典型 业务 流程 的 应 用 程序 即 可 创建 测试 脚本 。 系 统 使 用 简明 的 英文 语 
句 和 屏幕 抓 图 来 自动 记录 业务 流程 中 的 每 个 步骤 。 用 户 可 以 在 关键 字 视 图 中 轻松 修改 、 
删除 或 重新 安排 测试 步骤 。 

(2) QTP 可 以 自动 引入 检查 点 ,以 验证 应 用 程序 的 属性 和 功能 ,例如 验证 输出 或 检 
查 链 接 有 效 性 。 对 于 关键 字 视 图 中 的 每 个 步骤 ,活动 屏幕 均 准 确 显示 测试 中 应 用 程序 处 
理 此 步骤 的 方式 。 也 可 以 为 任何 对 象 添 加 几 种 类 型 的 检查 点 ,以 便 验 证 组 件 是 否 按 预期 
运行 (只 需 在 活动 屏幕 中 单 击 此 对 象 即 可 ) 。 

(3) 可 以 在 产品 介绍 中 输入 测试 数据 ,以 便 在 不 需要 编程 的 情况 下 处 理 数 据 集 和 创 
建 多 个 测试 迭代 ,从 而 扩大 测试 案例 范围 。 用 户 可 以 输入 数据 ,或 从 数据 库 、 电 子 表格 或 
文本 文件 导入 数据 。 

(4) 高 级 测试 人 员 可 以 在 专家 视图 中 查看 和 编辑 自己 的 测试 脚本 ,该 视图 显示 QTP 
自动 生成 的 基于 业界 标准 的 内 在 VB 脚本 。 专 家 视图 中 进行 的 任何 变动 自动 与 关键 字 视 
图 同步 。 

(5) QTP 加 快 了 更 新 流程 。 当 测试 中 应 用 程序 出 现 变 动 ,例如 “退出 ”按钮 更 命名 为 
“放弃 ”按钮 时 ,可 以 对 共享 对 象 库 进行 一 次 更 新 .然后 此 更 新 将 传播 到 所 有 引用 该 对 象 的 
脚本 。 

(6) ОТР 支持 所 有 常用 环境 的 功能 测试 ,包括 Windows, Web,. Net、VisualBasic、 
ActiveX „Java, SAP, Siebel 和 Oracle 等 。 


3. QTP 的 安装 


ОТР 的 安装 步骤 如 下 : 

(1) 单 击 Quick Test Professional 安装 程序 ,出现 如 图 8-2 所 示 界 面 ,程序 开始 安装 。 
(2) 出 现 许可 协议 安装 界面 ,选择 “我 接受 该 许可 证 协议 中 的 条 款 ”, 单 击 “ 是 ”按钮 。 
(3) 在 许可 证 类 型 中 选择 “单机 版 ”, 单 击 “ 下 一 步 ” 按 钮 。 

(4) 填写 注册 信息 , 单 击 * 下 一 步 "按钮 。 维 护 号 是 随 着 Quick Test Professional 包装 
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MERCURY” 


QuickTest Professional 9.2 


图 8-2 QTP 安装 起 始 界面 


提供 的 。 

(5) 在 弹出 的 启用 Quick Test Professional 远程 执行 界面 中 选择 “自动 设置 这 些 选 
项 ”, 单 击 * 下 一 步 ? 按 钮 。 

(6) 在 设置 Internet Explorer 高 级 选项 中 选择 “我 将 手动 选择 这 些 选项 ”, 单 击 “ 下 一 
步 ” 按 钮 。 

(7) 在 选择 安装 类 型 界面 中 ,选择 “完全 ”, 单 击 “ 下 一 步 ” 按 钮 。 

(8) 在 弹出 的 界面 中 选择 “重启 电脑 ”, 单 击 “ 完 成 ”按钮 。 

(9) 重启 完成 后 ,在 界面 中 单 击 “ 完 成 "按钮, 出现 如 图 8-3 所 示 的 界面 。 


Welcome to the QuckTest Professional Sohware License 
This program wal instal а software seat icense on your 


图 8-3 QTP 安装 结束 界面 


4. QTP 的 使 用 方法 


QTP 进行 功能 测试 的 测试 流程 为 制定 测试 计划 、 创 建 测试 脚本 .增强 测试 脚本 功能 、 
运行 测试 和 分 析 测试 结果 五 个 步骤 。 

1) 制定 测试 计划 

自动 测试 的 测试 计划 是 根据 被 测 项 目的 具体 需求 ,以 及 所 使 用 的 测试 工具 而 制定 的 ， 
完全 用 于 指导 测试 全 过 程 。 

QTP 是 一 个 功能 测试 工具 ,主要 帮助 测试 人 员 完 成 软件 的 功能 测试 ,与 其 他 测试 工 
具 一 样 ,QTP 不 能 完全 取代 测试 人 员 的 手工 操作 ,但 是 在 某 个 功能 点 上 ,使 用 QTP 的 确 
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能 够 帮助 测试 人 员 做 很 多 工作 。 在 测试 计划 阶段 ,首先 要 做 的 就 是 分 析 被 测 应 用 的 特点 ， 
决定 应 该 对 哪些 功能 点 进行 测试 ,可 以 考虑 细 化 到 具体 页 面 或 者 具体 控件 。 对 于 一 个 普 
通 的 应 用 程序 来 说 ,QTP 应 用 在 某 些 界面 变化 不 大 的 回归 测试 中 是 非常 有 效 的 。 

2) 创建 测试 脚本 

当 测 试 人 员 浏览 站 点 或 在 应 用 程序 上 操作 的 时 候 ,QTP 的 自动 录制 机 制 能 够 将 测试 
人 员 的 每 一 个 操作 步骤 及 被 操作 的 对 象 记录 下 来 .自动 生成 测试 脚本 语句 。 与 其 他 自动 
测试 工具 录制 脚本 有 所 不 同 的 是 .QTP 除了 以 VBScript 脚本 语言 的 方式 生成 脚本 语句 
以 外 ,还 将 被 操作 的 对 象 及 相应 的 动作 按照 层次 和 顺序 保存 在 一 个 基于 表格 的 关键 字 视 
图 中 。 

单 击 工 具 栏 上 的 Record 按钮 。 打 开 如 图 8-4 所 示 Record and Run Settings 对 话 窗 
口 ,选择 Web 选项 卡 或 Windows Applications 选项 卡 , 然 后 开始 录制 脚本 。 


Record and Run Settings ЕЗ 


Web | Windows Applications | 


Note: You can run tests on any supported browser but can record 
oniy on Microsoft Intemet Explorer. 


Open the following browser when a run session begins 


Microsoft е - 


取消 ЕВА 222 
图 8-4 录制 /运行 脚本 


3) 增强 测试 脚本 的 功能 

录制 脚本 只 是 实现 创建 或 者 设计 脚本 的 第 一 步 , 基 本 的 脚本 录制 完毕 后 ,测试 人 员 可 
以 根据 需要 增加 一 些 扩展 功能 ,QTP 允许 测试 人 员 通 过 在 脚本 中 增加 或 更 改 测试 步骤 来 
修正 或 自 定义 测试 流程 ,如 增加 多 种 类 型 的 检查 点 功能 , 既 可 以 让 ОТР 检查 一 下 在 程序 
的 某 个 特定 位 置 或 对 话 框 中 是 否 出 现 了 需要 的 文字 ,也 可 以 检查 一 个 链接 是 否 返 回 了 正 
确 的 URL 地 址 等 ,还 可 以 通过 参数 化 功能 ,使 用 多 组 不 同 的 数据 驱动 整个 测试 过 程 。 

4) 运行 测试 

QTP 从 脚本 的 第 一 行 开 始 执 行 语句 ,运行 过 程 中 会 对 设置 的 检查 点 进行 验证 ,用 实 
际 数据 代替 参数 值 ,并 给 出 相应 的 输出 结构 信息 。 测 试 过 程 中 测试 人 员 还 可 以 调试 自己 
的 脚本 ,直到 脚本 完全 符合 要 求 。 

在 QTP 中 , 按 F5 键 运行 测试 脚本 ,会 出 现 如 图 8-5 所 示 的 对 话 框 。 可 以 选择 测试 运 
行 结果 存储 的 位 置 ,如 果 选 择 New run results folder, 可 以 为 本 次 测试 选择 一 个 目录 用 于 
存储 测试 结果 文件 ,如 果 和 希望 保存 每 次 测试 运行 的 结果 , 则 应 该 选择 New тип results 
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folder 单 选 按钮 。 如 果 选 择 Temporary гип results folder 单 选 按 钮 , 则 ОТР 将 运行 测试 
结果 存放 到 默认 的 目录 中 ,并 且 覆 盖 上 一 次 该 目录 中 的 测试 结果 , 当 测 试 脚 本 处 于 调试 和 
检查 分 析 阶 段 ,感觉 没 必要 保存 每 次 运行 的 测试 结果 , 则 可 以 选择 Temporary run results 
folder 单 选 按钮 。 


ІН кесе | 2 
Resuts Location | input Parameters | 
Wirte run resus to 


б 6 ді 
сиу Interactive\QuickT est Polessional\Tests\ight01\Res8 ШЕ 


PP (overwies any existing temporary гезийз) 


5) 分 析 测试 


行 结束 后 系统 会 自动 生成 一 份 详细 完整 的 测试 结果 报告 。 


QTP 适合 测试 版 本 比较 稳定 的 软件 产品 ,在 一 些 界面 变化 不 大 的 回归 测试 中 非常 有 
效 ,但 对 于 界面 变化 频率 较 大 的 软件 , 则 体现 不 出 QTP 的 优势 。 


8.3.6 自动 化 测试 工具 AutoRunner 


AutoRunner 是 一 款 自 动 化 测试 工具 ,是 上 海 泽 众 软件 科技 有 限 公 司 的 产品 。 上 海 
泽 众 软件 科技 有 限 公司 自 2003 年 成 立 以 来 ,是 专业 从 事 自 动 化 软件 测试 方法 .技术 的 研 
究 与 开发 ,测试 服务 的 高 新 技术 企业 。 


1. AutoRunner 产品 介绍 


AutoRunner 可 以 用 来 执行 重复 的 手工 测试 。 主 要 用 于 功能 测试 .回归 测试 的 自动 


化 。 它 采用 数据 驱动 和 参数 化 的 理念 ,通过 录制 用 户 对 被 测 系统 的 操作 ,生成 自动 化 肢 
本 ,然后 让 计算 机 执行 自动 化 脚本 ,达到 提高 测试 效率 ,降低 人 工 测试 成 本 。 


AutoRunner 是 黑 盒 测试 工具 ,可 以 用 来 完成 功能 测试 .回归 测试 ,可 以 提高 测试 效 
率 , 降 低 测 试 人 工 成 本 。 


产品 可 以 对 以 下 类 型 对 象 进行 GUI 功能 性 测试 : 


(1) Windows 类 型 对 象 ,一 般 为 用 C++ /Delphi/VB/VFP/PB/. NetForm 等 技术 开 
发 的 桌面 程序 。 


(2) IE 网 页 对 象 , 一 般 性 的 网 站 ,比如 大 的 门户 类 网 站 。 


(3) Java 对 象 ,一 般 为 用 AWT/Swing/SWT 等 技术 开发 的 桌面 程序 。 
(4) Flex 对 象 ,网 页 的 内 容 是 用 Flex 开发 的 。 
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(5) Silverlight 对 象 ,网 页 的 内 容 是 用 Silverlight 开发 的 。 

(6) WPF 对 象 ,一 般 为 用 WPF 技术 开发 的 桌面 程序 。 

(7) QT 对 象 , 一 般 为 用 QT 技术 开发 的 桌面 程序 。 

产品 特点 如 下 : 

(1) 使 用 Java/ BeanShell 语言 作为 脚本 语言 ,使 脚本 更 简单 ,更 少 ,更 易于 理解 。 

(2) 采用 关键 字 提 醒 .关键 字 高 亮 的 技术 ,提高 脚本 编写 的 效率 。 

(3) 提供 了 强大 的 脚本 编辑 功能 。 

(4) 支持 同步 点 。 

(5) 支持 校 验 点 。 

(6) 支持 参数 化 ,同时 支持 数据 驱动 的 参数 化 。 

Ст) 支持 测试 过 程 的 错误 提示 功能 。 

(8) 允许 用 户 在 某 个 时 刻 从 被 测试 系统 中 获取 对 象 各 种 的 信息 ,例如 ,一 个 对 话 框 上 
的 按钮 的 名 字 等 属性 信息 

(9) 通过 设置 对 象 象 的 识别 权重 ， 可 以 在 各 种 情况 下 有 效 识别 对 象 。 

(10) AutoRunner3. 0 新 增 了 许多 命令 函数 ,有 利于 测试 人 员 进 行 各 种 功能 测试 , 熟 
练 掌握 这 些 命令 函数 ,能够 让 测试 人 员 编 写 出 更 简练 .更 高 效 的 测试 脚本 。 


2. AutoRunner 的 测试 过 程 


下 面 通过 一 个 简单 的 计算 器 的 例子 对 AutoRunner 的 测试 过 程 有 一 个 直观 的 了 解 。 

D 项 目 操作 

新 建 项 目 或 导入 项 目 , 选择 “文件 ”一 “新 建 ” 一 “项 目 ” 如 图 8-6 所 示 。 启 动 
AutoRunner 如 图 8-7 所 示 。 


AutoRunner .....„ 


请 输入 项 目的 名 称 : 


c] 


图 8-6 新 建 项 目 对 话 框 图 8-7 AutoRunner 的 启动 


2) 新 建 脚本 或 导入 脚本 

新 建 脚本 或 导 人 脚本 选择 “文件 ”一 “新 建 ”~ 脚本 ”如 图 8-8 所 示 。 

3) 程序 脚本 录制 

以 录制 Windows 中 自 带 的 计算 器 为 例 , 详 细 地 介绍 一 下 录制 Windows 程序 脚本 的 
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ТІ 回 winbsh | D ex21bsh | D ex22bsh | |Д ex3 1bsh 


图 8-8 新 建 ex3_1 脚本 


过 程 。 

(1) 创建 脚本 。 创 建 一 个 名 为 ex3_1. bsh 的 脚本 (脚本 名 可 任 取 ) ,或 双击 脚本 打开 。 

(2) 录制 脚本 。 先 打开 要 录制 的 计算 器 程序 “开始 ”>“ 运 行 ”, 输 入 cale 回 车 即 可 ,出 
现 如 图 8-9 所 示 的 计算 器 窗口 。 

选择 菜单 “录制 ”~ 开始 录制 ”, 或 者 是 直接 单 击 工具 栏 上 的 “录制 ”按钮 ,之 后 会 弹出 
一 个 如 图 8-10 所 示 的 对 话 框 , 询 问 附加 记录 信息 。 


жас) 查看 (7) 帮助 00 


Backspace СЕ с 


т 加 全 新 录制 
LAAL 


图 8-9 计算 器 图 8-10 录制 脚本 “询问 "对 话 框 


17 9 — 
4 в 录制 将 会 改变 当前 脚本 ， е 
1 3 


软件 将 进入 录制 阶段 ,此 阶段 里 软件 界面 会 被 隐藏 ,并 在 屏幕 的 右 下 角 显 示 一 个 录制 
信息 窗口 ,显示 当前 录制 的 相关 信息 。 图 8-11 所 示 的 是 单 击 了 计算 器 上 的 数字 键 1] 和 2 
另 加 一 个 等 号 键 和 一 个 加 号 键 的 录制 信息 ,这 里 并 没有 选择 记录 击 键 和 记录 时 间 。 

(3) 停止 录制 。 

录制 完成 后 , 单 击 面板 左上 角 的 “停止 "按钮 ,结束 录制 ,此 时 在 脚本 里 会 看 到 面板 上 
的 脚本 ,同时 在 对 象 库 中 能 看 到 每 个 对 象 的 具体 属性 信息 ( 单 击 工具 栏 的 最 后 一 个 按钮 打 
开 对 象 库 面板 ) 。 

(4) 生成 文件 。 

在 录制 好 脚本 后 ,在 项 目 目录 下 会 存在 ex3_1. bsh、ex3_1. xls 和 ex3_1. xml 三 个 
文件 。 
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larwindowf'SciCalc_ 计 算 器 ") сііскСопігоІ"Вийоп_1", 24, 16, "е/Ғ; 
rwindowf'SciCalc_ 计 算 器 ”clickControlf Button_+", 26,11, Че); 

arwindowC'Scicalc_ 计 算 器 ").clickControlCButton_2", 21, 9, "1е17); 

arwindow('SciCalc_ 计 算 器 ").clickControl('Button_=", 13, 11, Че"); 


图 8-11 录制 计算 器 


第 一 个 为 脚本 文件 ,保存 了 脚本 编辑 器 中 的 脚本 。 

第 二 个 为 参数 表 文件 ,是 一 个 Excel 表格 ,所 有 的 参数 化 数据 都 将 被 保存 到 这 里 , 当 
然 在 没 用 到 参数 化 时 ,此 文件 中 无 数据 。 

第 三 个 为 对 象 库 文 件 , 是 一 个 xml 格式 ,前 面 看 到 的 对 象 库 信息 会 被 保存 到 这 里 ,对 
象 库 可 以 进行 编辑 ,编辑 后 也 会 被 保存 下 来 。 

上 面 的 三 个 文件 都 可 以 在 软件 中 修改 ,不 建议 在 软件 外 编辑 。 

4) 回放 

选择 “执行 ">“ 开 始 执行 "命令 或 者 单 击 工 具 栏 的 “回放 ”按钮 ,此 时 软件 进入 回放 阶 
段 ,界面 会 被 隐藏 ,回放 的 结果 会 在 输出 窗口 中 显示 ,如 回放 成 功 会 有 如 图 8-12 所 示 的 信 
息 输 出 。 


ed Feb 23 14:49:52 CST 2011 
in.bsh 脚 本 : 


行 结束 ， 耗 时 3 秒 。 
行 结果 ; 执行 成 功 ! 


图 8-12 回放 


如 果 回 放 之 前 将 计算 器 窗口 关闭 ,回放 后 会 有 如 图 8-13 所 示 的 信息 输出 ,提示 执行 
window 动作 时 ,计算 器 窗口 对 象 没 有 找到 。 


Бен | езж 
ей Feb 23 14:55:43 СТ 2011 
in.bsh 脚 本 : 

ATAR, назы. 


行 结果 : 执行 失败 ! 
者 误 列表 : 
"window SciCalc_ 计 算 器 " 没有 找到 对 象 ! 


图 8-13 回放 之 前 将 计算 器 窗口 关闭 


如 果 回 放 之 前 在 对 象 库 中 将 等 号 的 属性 信息 删除 ,回放 后 会 有 如 图 8-14 所 示 的 信息 
输出 ,提示 回放 clickControl 动作 时 ,等 号 对 象 在 对 象 库 中 没有 发 现 。 
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是 输出 | 到 参数 表 


ей Feb 23 15:01:20 CST 2011 
in.bsh 肢 本: 
паж, нав. 
行 结果 : 执行 失败 ! 
RRE : 
clickControl Button_=" 对 象 不 在 库 中 ! 


图 8-14 回放 之 前 在 对 象 库 中 将 等 号 的 属性 信息 删除 


题 


.自动 化 测试 的 含义 是 什么 ? 自动 化 测试 有 哪些 优 缺 点 ? 
2 简 述 如 何 确定 自动 化 测试 的 对 象 和 范围 。 

. 什么 是 白 盒 静态 测试 工具 ?什么 是 白 盒 动态 测试 工具 ? 
. 什么 是 黑 盒 功能 测试 工具 和 性 能 测试 工具 ? 

学 习 使 用 QTP, 说 明 其 运行 测试 的 步骤 。 

. 学习 使 用 AutoRunner, 并 说 明 其 产品 特点 。 


第 9 章 软件 测试 行业 综述 


本 章 是 对 软件 测试 行业 的 综述 ,首先 介绍 了 软件 测试 行业 发 展 的 现状 和 软件 测试 技 
术 的 发 展 方向 以 及 软件 测试 外 包 ; 其 次 ,介绍 了 软件 测试 工程 师 职 业 的 要 求 、 软 件 测试 工 
作 特 点 和 如 何 成 为 一 名 合格 的 软件 测试 工程 师 ; 最 后 ,介绍 如 何 准备 应 聘 和 面试 软件 测试 
工程 师 ,以 及 如 何 准备 全 国 计 算 机 等 级 考试 一 一 软件 测试 工程 师 考试 。 


9.1 软件 测试 的 发 展 和 现状 


软件 测试 作为 信息 产业 的 重要 分 支 在 我 国 发 展 十 分 迅速 ,并 且 业 内 对 软件 测试 的 发 
展 也 有 着 乐观 和 积极 的 态度 。 可 以 这 样 说 ,软件 测试 职业 前 景 也 是 非常 美好 。 当 前 软件 
测试 技术 职业 市 场 表 明 , 具 有 一 定 测试 经 验 的 软件 测试 工程 师 很 受 市 场 青睐 ,供不应求 。 
目前 ,软件 测试 工作 越 来 越 得 到 重视 。 


1. 世界 软件 产业 的 发 展 


世界 软件 产业 始终 保持 着 高 速 增长 ,从 2000 年 起 软件 和 信息 服务 业 就 成 为 世界 第 一 
大 产业 ,产值 将 近 5000 亿美 元 。 产 业 规模 上 ,全球 软件 从 业 人 员 已 达 数 百 万 人 ,软件 企业 
有 几 万 家 。 以 1996 年 为 例 , 美 国 整个 经 济 部 门 的 就 业 增 长 率 为 1.6%, 而 软件 产业 部 门 
就 业 增长 率 高 达 11. 4%。 近 年 来 随 着 全 球 信息 化 建设 的 迅速 推进 ,软件 人 员 尤 其 是 高 层 
次 软件 人 才 供 不 应 求 的 问题 更 加 突出 。 

产业 结构 上 ,国际 计算 机 产业 结构 逐渐 从 以 硬件 为 核心 向 以 软件 为 主导 的 方向 过 渡 。 
在 全 球 软件 市 场 中 ,美国 软件 市 场 是 发 展 最 为 成 熟 的 地 区 市 场 , 亚 太 市 场 是 最 有 发 展 前 途 
的 市 场 , 一 直 保 持 20% 以 上 的 增长 速度 。 中 国 市 场 在 亚太 市 场 中 具有 举足轻重 的 地 位 。 

世界 软件 市 场 一 直 保持 良好 的 增长 势头 ,尽管 受 亚洲 经 济 危 机 的 影响 ,但 平均 增长 率 
仍 达 到 10% 左 右 。 总 体 来 看 ,软件 产业 的 集中 度 呈 上 升 趋势 。 美 国 仍然 是 世界 软件 最 强 
国 , 其 软件 产品 占有 全 球 60% 以 上 的 市 场 份额 。 全 球 十 大 软件 厂商 中 ,有 7 家 是 美国 公 
司 ,2 家 是 日 本 公司 。 


2. 我 国 软件 测试 产业 的 现状 


我 国 的 软件 测试 技术 研究 起 步 于 20 世纪 90 年 代 , 主要 是 随 着 软件 工程 的 研究 而 逐 
步 发 展 起 来 的 。 由 于 起 步 较 晚 ,与 国际 先进 水 平 相 比 差距 较 大 。 随 着 我 国 软件 产业 的 莲 
勃发 展 以 及 对 软件 质量 的 重视 ,软件 测试 也 越 来 越 被 软件 企业 所 重视 ,软件 测试 正在 逐步 
成 为 一 个 新 兴 的 产业 。 中 国 软 件 产 业 的 蓬勃 发 展 ,企业 对 于 软件 测试 越 来 越 重 视 。 软 件 
测试 正 逐 步 形成 一 个 新 兴 的 产业 ,并 处 于 快速 成 长 阶段 。 相 信 , 经 过 一 段 时 间 的 发 展 , 国 
内 的 软件 测试 行业 会 缩小 与 国外 发 达 国 家 的 差距 ,从 而 带动 整个 软件 产业 的 健康 发 展 。 
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我 国 软件 测试 产业 的 发 展 经 历 了 两 个 阶段 : 

第 一 阶段 ,起 步 阶段 。 

我 国 的 软件 测试 的 起 步 较 晚 。 直 到 20 世纪 90 年 代 , 才 成 立 了 国家 级 的 中 国 软 件 评 
测 中心 ,测试 服务 才 逐 步 展开 。 由 于 起 步 时 间 上 的 差距 ,我 国 目前 不 论 是 在 软件 测试 理论 
研究 ,还 是 在 软件 测试 的 实践 上 ,和 国外 发 达 国 家 都 有 不 小 的 差距 。 技 术 研 究 贫乏 ,测试 
实践 与 服务 也 未 形成 足够 规模 ,从 业 人 员 数 量 少 , 层 次 也 不 够 高 。 

2000 年 以 前 ,国内 软件 公司 有 专门 设立 软件 测试 岗位 的 可 说 是 少 之 又 少 , 大 部 分 情 
况 是 代码 设计 人 员 编 码 完成 后 ,进行 调试 ,对 基本 功能 自行 进行 确认 。 据 悉 , 即 使 是 目前 
排名 第 一 的 软件 公司 华为 也 是 在 1997 年 才 有 正式 的 测试 岗位 。 

第 二 阶段 ,发 展 阶段 。 

进入 新 世纪 后 ,由 于 互联 网 信息 产业 的 迅速 崛起 ,不 仅 改变 着 人 们 的 工作 方式 ,也 影 
响 着 日 常生 活 中 人 们 的 交流 方式 。 随 着 国内 软件 外 包公 司 的 快速 发 展 ,市 场 把 对 软件 测 
试 的 需求 推 向 了 一 个 高 潮 。 同 时 ,属国 内 高 科技 领域 的 软件 行业 一 方面 是 受 国 家 政策 的 
支持 , 另 一 方面 也 是 社会 发 展 之 需 。 而 大 家 都 知道 ,有 软件 的 地 方 , 就 需要 有 软件 测试 , 因 
为 软件 测试 仍 是 至 今 为 止 最 好 的 提高 软件 质量 的 手段 。 此 阶段 ,在 互联 网 上 百度 或 
google 一 下 “软件 测试 员 ” 或 “软件 测试 工程 师 ”, 便 有 成 千 上 万 的 相关 信息 出 来 。 全 国 大 
大 小 小 与 软件 相关 的 公司 都 开始 设立 软件 测试 岗位 ,并 招聘 相关 人 才 。 也 正 因 为 有 这 些 
社会 需求 ,全 国 各 地 的 测试 培训 ,测试 服务 机 构 犹 如 雨后春笋 般 不 断 地 涌现 ,如 领 测 软件 
测试 ,北大 青鸟 \ 达 内 、51testing 等 。 

就 当前 形势 来 看 ,软件 测试 工程 师 在 国内 非常 紧缺 。 据 统计 ,欧美 软件 项 目 中 ,软件 
测试 的 工作 量 和 费用 已 占 到 项 目 总 工作 量 的 53%% 一 87 失 。 国 外 成 熟 软件 企业 ,如 微软 ， 
软件 开发 人 员 与 测试 人 员 的 比例 约 为 1 : 2, 而 国内 软件 企业 ,平均 8 个 软件 开发 工程 师 
才 对 应 1 个 软件 测试 工程 师 , 比 例 严 重 失 衡 。 前 几 年 国内 的 大 小 企业 对 测试 人 员 的 重要 
没有 得 到 重视 ,现在 很 多 企业 都 重金 招 纳 软件 测试 人 员 ,在 未 来 几 年 内 ,测试 人 员 的 需求 
量 还 会 增加 , 随 着 经 济 的 发 展 ,各 类 应 用 软件 的 开发 ,软件 测试 行业 将 会 具有 非常 重要 的 
地 位 。 

随 着 软件 外 包 行 业 的 逐渐 兴起 和 人 们 对 软件 质量 保障 意识 的 加 强 , 中 国 软件 企业 已 
开始 认识 到 ,软件 测试 的 广度 和 深度 决定 了 中 国 软 件 企业 的 前 途 命 运 。 例 如 , 占 中 国 软件 
外 包 总 量 近 85% 的 对 日 软件 外 包 企 业 , 业 务 内 容 基 本 都 针对 测试 环节 。 软 件 外 包 中 对 测 
试 环 节 的 强化 ,直接 导致 了 软件 外 包 企 业 对 测试 人 才 的 大 量 需求 。 

国家 信息 产业 部 发 布 的 最 新 报告 显示 ,我 国 目前 软件 人 才 缺 口 高 达 40 万 。 即 使 按照 
软件 开发 工程 师 与 测试 工程 师 1 : 1 的 岗位 比例 计算 ,我 国 对 于 软件 测试 工程 师 的 需求 便 
有 数 十 万 之 众 , 而 目前 ,我 国 软件 开发 工程 师 与 测试 工程 师 岗位 比例 为 6 : 1, 远 远 低 于 国 
际 水 平 。 预 计 在 未 来 10 年 内 ,我国 IT 企业 对 软件 测试 人 才 的 需求 还 将 继续 增 大 。 

软件 测试 的 发 展 势 在 必 行 ,从 有 关 资 料 获悉 ,金融 和 电信 行业 ,他 们 买 的 硬件 设备 都 
是 顶级 的 ,可 惜 软件 应 用 这 一 块 跟 不 上 ,导致 了 硬件 功能 得 不 到 充分 的 发 挥 。 硬 件 设 备 低 
下 的 运行 效率 ,造成 了 资源 与 资金 的 隐 性 浪费 ,实际 上 是 国内 软件 在 拖 硬 件 的 后 腿 。 国 内 
的 软件 开发 普遍 存在 “ 重 开发 , 轻 测试 ?的 现象 ,常常 是 在 项 目 开发 完成 之 后 , 才 发 现 软件 
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有 严重 缺陷 问题 ,不 得 不 全 部 推倒 从 头 再 来 。 推 倒 重 来 则 意味 着 前 期 人 、 财 、 物 的 投入 全 
部 浪费 了 , 既 大 大 增加 了 软件 的 开发 成 本 ,又 会 因为 超出 了 客户 的 委托 时 间 , 付 出 的 代价 
就 更 高 了 。 

实践 经 验证 明 ,软件 测试 是 软件 开发 过 程 中 的 一 个 重要 步骤 ,或 者 说 测试 应 该 贯穿 在 
软件 开发 过 程 的 每 一 个 阶段 。 软 件 测试 所 起 到 的 作用 就 是 能 够 确保 在 软件 开发 的 过 程 
中 ,随时 发 现 问题 ,方便 开发 人 员 及 时 修改 。 

如 何 提高 我 国 的 软件 测试 行业 的 发 展 水 平 呢 ? 下 面 从 三 个 方面 加 以 阐述 。 

首先 要 解决 软件 测试 专业 人 才 的 问题 。 国 内 企业 对 要 提高 软件 测试 的 重视 程度 ,并 
且 壮 大 软件 测试 队伍 ,提高 测试 人 员 的 素质 。 国 内 很 多 软件 企业 对 软件 测试 的 重要 性 了 
解 不 够 , 重 开发 轻 测试 的 现象 较为 严重 ,很 多 公司 测试 工程 师 太 少 ,没有 专门 的 测试 部 门 ， 
开发 人 员 同 时 做 测试 工作 的 现象 较为 普遍 ,尤其 在 中 小 型 软件 企业 中 这 种 现象 特别 突出 。 
要 改变 这 种 现状 ,需要 一 个 漫长 的 过 程 ,不 过 随 着 中 国 市 场 的 透明 度 得 到 提高 ,产品 质量 
问题 将 成 为 软件 企业 能 否 继续 发 展 壮大 的 关键 所 在 ,也 会 促使 相 越 来 越 多 的 企业 管理 者 
意识 到 产品 测试 的 重要 性 ,也 会 将 越 来 越 多 的 精力 投入 到 测试 工作 中 。 

其 次 是 要 善于 学 习 与 吸收 国外 的 先进 经 验 。 我 们 中 国人 具有 很 强 的 学 习 能 力 ,但 在 
软件 测试 这 一 块 ,我 们 有 太 多 要 学 习 国 外 的 先进 技术 及 经 验 。 国 外 有 完善 的 测试 机 制 ,有 
丰富 的 软件 测试 经 验 , 有 强大 的 测试 工具 ,有 优秀 的 测试 管理 水 平 ,这 些 我 们 都 应 好 好 地 
学 习 , 确 立 与 国外 先进 水 平 相 同 的 技术 指标 和 质量 标准 ,解决 测试 手段 落后 ,测试 方法 单 
一 和 测试 工具 欠缺 的 问题 ,在 行业 内 部 形成 一 个 严密 有 效 的 纠 错 系统 ,使 国内 的 测试 工作 
流程 ,技术 水 平 接近 国外 先进 水 平 ,这 样 才能 提高 国内 软件 开发 与 测试 的 整体 管理 水 平 ， 
增加 软件 产品 的 竞争 力 。 

第 三 ,大 力 发 展 专业 的 测试 公司 ,重视 利用 第 三 方 的 测试 力量 进行 测试 。 如 果 让 企业 
从 头 去 建立 测试 部 门 ,并 完善 测试 质量 体系 ,需要 较 多 的 资金 投入 ,增加 企业 的 运营 成 本 ， 
而 且 技 术 支 持 和 技术 培训 也 得 从 头 做 起 ,往往 很 困难 。 而 将 研发 出 来 的 软件 产品 交 给 实 
力 强劲 的 第 三 方 专业 测试 机 构 ,不 仅 能 大 大 地 提高 软件 产品 的 质量 问题 ,而 且 还 节约 了 产 
品 测试 成 本 。 第 三 方 专业 测试 机 构 将 越 来 越 多 ,规模 也 将 越 来 越 大 。 目 前 国内 很 多 地 方 
都 有 了 软件 产品 检测 中 心 ,此 类 机 构 是 依靠 技术 与 服务 来 征服 客户 的 ,注重 测试 方法 与 质 
量 ,国外 在 这 一 方面 发 展 得 很 好 ,相信 国内 的 发 展 也 是 很 快 的 。 随 着 软件 测试 行业 的 发 
展 、 提 高 和 完善 ,也 会 像 软 件 开发 行业 一 样 出 现 分 工 上 的 细 化 ,测试 人 员 等 级 的 划分 ,比如 
初级 测试 员 ,测试 工程 师 、 高 级 测试 工程 师 ,测试 设 计 师 和 测试 经 理 等 ,同时 也 会 出 现 各 种 
各 样 的 国家 认证 ,企业 认证 、 国 际 认证 等 。 

软件 行业 在 我 国 是 一 个 “朝阳 产业 ”, 而 软件 测试 又 是 软件 行业 中 的 “朝阳 产业 ”, 它 是 
保证 软件 质量 的 重要 手段 。 经 过 近 二 十 年 的 发 展 ,我 国 的 软件 测试 和 应 用 技术 有 了 很 大 
的 进展 ,同时 也 得 到 了 广泛 的 关注 。 然 而 ,也 应 该 看 到 ,我 国 的 软件 测试 行业 与 发 达 国 家 
相 比 还 有 比较 大 的 差距 ,很 大 程度 上 体现 在 软件 测试 的 意识 、 技 术 和 规范 上 。 目 前 ,只 要 
我 们 加 强 测试 意识 的 培养 ,加 强 技术 上 的 学 习 , 规 范 软件 开发 和 测试 流程 ,相信 不 久 的 将 
来 ,我 国 的 软件 测试 和 应 用 就 会 有 一 个 比较 充分 .长足 的 发 展 。 
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9.2 ”软件 测试 技术 的 发 展 方向 


当前 ,信息 产业 发 展 突飞猛进 ,软件 测试 技术 也 在 同步 发 展 。 自 动 化 软件 测试 技术 应 
用 越 来 越 普遍 ,测试 技术 正在 朝 多 元 化 方向 发 展 ,面向 对 象 软 件 测试 应 用 越 来 越 普遍 , 联 
机 测试 也 越 来 越 引起 大 家 的 重视 。 


1. 自动 化 软件 测试 技术 应 用 越 来 越 普遍 


由 于 软件 测试 很 大 程度 上 是 一 种 重复 性 工作 ,这 种 重复 性 表现 在 同样 的 一 个 功能 点 
或 是 业务 流程 需要 借助 于 不 同类 型 的 数据 驱动 而 运行 很 多 遍 , 同 时 ,由 于 某 一 个 功能 模块 
的 修改 有 可 能 影响 其 他 模块 而 需要 进行 回归 测试 ,也 需要 测试 人 员 重 复 执行 以 前 用 过 的 
测试 用 例 ,另外 ,自动 化 测试 工具 可 以 实现 人 们 用 手工 无 法 实现 的 工作 ,如 负载 测试 工具 
可 以 同时 模拟 成 千 上 万 的 用 户 并 发 操作 ,弥补 了 人 工 测试 的 不 足 。 正 是 基于 以 上 原因 ,人 
们 想 出 了 自动 化 测试 方法 ,同时 计算 机 技术 的 发 展 也 为 自动 化 测试 的 实现 提供 了 条 件 。 
目前 比较 常见 的 自动 化 测试 技术 的 应 用 体现 为 功能 测试 工具 ,负载 压力 测试 工具 和 自动 
化 测试 工具 。 在 2009 年 下 半年 由 工业 和 信息 化 部 组 织 的 全 国 范围 内 对 软件 企业 所 进行 
的 调研 数据 来 看 ,80% 以 上 的 软件 企业 都 使 用 了 自动 化 测试 技术 。 

但 就 自动 化 技术 的 使 用 情况 来 看 ,大 多 数 公司 是 使 用 负载 测试 工具 进行 性 能 测试 。 
由 于 国内 的 软件 开发 过 程 不 是 很 规范 ,软件 产品 相对 不 够 成 熟 , 大 多 数 软件 往往 不 具备 自 
动 化 功能 工具 应 用 的 条 件 。 功 能 自动 化 测试 工具 大 规模 的 应 用 还 需要 一 定 的 时 间 。 


2. 测试 技术 多 元 化 


随 着 大 家 对 质量 重视 程度 的 提高 ,人 们 不 再 满足 于 软件 功能 的 实现 ,更 看 重 于 软件 产 
品 或 系统 的 性 能 ,加 上 测试 工作 者 及 测试 厂商 的 努力 ,性 能 测试 工具 得 到 了 较为 广泛 的 应 
用 ,在 性 能 测试 方面 的 实践 不 断 得 到 积累 ,测试 工作 者 们 总 结 出 在 性 能 测试 方面 的 一 些 理 
论 与 方法 ,如 负载 测试 .压力 测试 ,大 数据 量 测试 等 。 相 信 在 不 久 的 将 来 ,在 性 能 测试 方 
面 , 还 会 有 新 的 理论 方法 补充 进来 。 除 此 之 外 ,根据 软件 应 用 领域 及 软件 类 型 的 不 同 ,出 
现 了 一 些 更 加 专业 的 测试 技术 类 型 ,下 面 挑选 几 种 主要 的 测试 技术 进行 介绍 。 

1) Web 应 用 测试 

B/S 架构 的 大 行 其 道 ,催生 了 人 们 对 Web 应 用 测试 的 研究 , Web 应 用 测试 继承 了 传 
统 测试 方法 ,同时 结合 Web 应 用 的 特点 。 比 起 任何 其 他 类 型 的 应 用 , Web 应 用 运行 在 更 
多 的 硬件 和 软件 平台 上 ,这 些 平 台 的 性 质 可 在 任何 时 间 改 变 , 完 全 不 在 Web 应 用 开发 人 
员 的 知识 或 控制 之 内 。 

2) 手机 软件 测试 

出 现 手机 软件 测试 这 个 研究 分 支 ,主要 是 因为 手机 在 中 国 应 用 特别 普遍 ,使 用 范围 很 
广 ,围绕 手机 所 出 现 的 软件 种 类 越 来 越 丰富 ,有 很 多 专门 从 事 手机 软件 的 开发 公司 ,于 是 
自然 而 然 出 现 一 批 手机 软件 测试 的 工程 师 。 
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3) 嵌入 式 软件 测试 

随 着 信息 技术 和 工业 领域 的 不 断 融 合 , 嵌 入 式 系统 的 应 用 越 来 越 广泛 ,可 以 预言 , 赃 
入 式 软件 将 有 更 为 广泛 的 发 展 空 间 。 对 于 嵌入 式 软 件 的 测试 也 将 有 着 很 大 的 市 场 需求 。 

4) 安全 测试 

近 些 年 来 , 随 着 计算 机 网 络 的 迅速 发 展 和 软件 的 广泛 应 用 ,软件 的 安全 性 已 经 成 为 备 
受 关注 的 一 个 方面 ,渐渐 融入 人 们 的 生活 ,成 为 关系 到 金融 、 电 力 、 交 通 、 医 疗 、 政 府 以 及 军 
事 等 各 个 领域 的 关键 问题 。 尤 其 在 当前 黑客 肆虐 ,病毒 独 儿 的 网 络 环境 下 , 越 来 越 多 的 软 
件 因为 自身 存在 的 安全 漏洞 ,成 为 黑客 以 及 病毒 攻击 的 对 象 ,给 用 户 带 来 严重 的 安全 隐 
患 。 软 件 安 全 漏洞 造成 的 重大 损失 以 及 还 在 不 断 增长 的 漏洞 数量 使 人 们 已 经 开始 深刻 认 
识 到 软件 安全 的 重要 性 。 

5) 可 靠 性 测试 

在 规定 的 时 间 内 ,规定 的 条 件 下 ,软件 不 引起 系统 失效 的 能 力 , 其 概率 度量 称 为 软件 
可 靠 度 。 软 件 可 靠 性 测试 是 指 为 了 保证 和 验证 软件 的 可 靠 性 要 求 而 对 软件 进行 的 测试 。 
经 常 采用 的 是 按照 软件 运行 剖面 (对 软件 实际 使 用 情况 的 统计 规律 的 描述 ) 对 软件 进行 随 
机 测试 。 

3. 面向 对 象 软件 测试 


随 着 面向 对 象 软件 开发 技术 的 广泛 应 用 和 软件 测试 自动 化 的 要 求 , 特 别 是 基于 软件 
开发 技术 的 逐渐 普及 ,基于 模型 的 软件 测试 逐渐 得 到 了 软件 开发 人 员 和 软件 测试 人 员 的 
认可 和 接受 。 它 是 一 种 新 兴 的 测试 用 例 生成 技术 。 其 中 模型 以 其 定义 良好 、 功 能 强大 、 普 
遍 适 用 的 优点 ,为 基于 模型 的 测试 提供 了 非常 好 的 契机 。 

面向 对 象 软件 测试 的 测试 工作 过 程 与 传统 的 测试 一 样 ,分 为 以 下 几 个 阶段 : 制定 测 
试 计划 .产生 测试 用 例 .执行 测试 和 评价 。 面 向 对 象 软 件 测试 可 分 为 方法 测试 ,类 测试 、 系 
统 测试 。 

1) 方法 测试 

方法 测试 主要 考察 封装 在 类 中 的 一 个 方法 对 数据 进行 的 操作 , 它 与 传统 的 单元 模块 
测试 相对 应 ,可 以 将 传统 成 熟 的 单元 测试 方法 。 但 是 ,方法 与 数据 一 起 被 封装 在 类 中 ,并 
通过 向 所 在 对 象 发 送 消息 来 驱动 , 它 的 执行 与 对 象 状 态 有 关 , 也 有 可 能 会 改变 对 象 的 状 
态 。 因 此 ,设计 测试 用 例 时 要 考虑 设置 对 象 的 初 态 , 使 它 收 到 消息 时 执行 指定 的 路 径 。 

2) 类 测试 

主要 考察 封装 在 一 个 类 中 的 方法 与 数据 之 间 的 相互 作用 。 一 个 对 象 有 它 自 己 的 状态 
和 依赖 于 状态 的 行为 ,对 象 操作 既 与 对 象 状态 有 关 , 又 反 过 来 可 能 改变 对 象 的 状态 。 普 遍 
认为 这 一 级 别 的 测试 是 必须 的 。 类 测试 时 要 把 对 象 与 状态 结合 起 来 ,进行 对 象 状态 行为 
的 测试 。 类 测试 可 分 基于 状态 的 测试 和 基于 响应 状态 的 测试 两 部 分 。 

3) 系统 测试 

系统 测试 是 对 所 有 类 和 主 程 序 构成 的 整个 系统 进行 整体 测试 ,以 验证 软件 系统 的 正 
确 性 和 性 能 指标 等 满足 需求 式样 说 明 书 和 任务 书 所 指定 的 要 求 。 它 与 传统 的 系统 测试 一 
样 , 包 括 功能 测试 ,性 能 测试 , 余 量 测试 等 ,可 套用 传统 的 系统 测试 方法 。 
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4. 联机 测试 


联机 测试 又 叫 在 线 测试 ,监控 测试 ,是 软件 自动 化 的 一 种 方式 。 这 种 测试 技术 已 经 存 
在 三 十 余年 了 , 随 着 软件 系统 复杂 性 的 增加 ,联机 测试 备 受 关注 。 联 机 测试 关注 软件 在 其 
领域 内 的 行为 ,目标 是 检验 是 否 按照 设 定 的 行为 执行 ,并 且 检 测 故障 和 性 能 问题 。 联 机 测 
试 关注 两 点 : 一 是 联机 恢复 ,二 是 分 析 脱 机 行为 产生 剖面 或 获取 可 靠 性 指标 。 


9.3 软件 测试 外 包 


在 软件 开发 外 包 领 域 ,一 些 中 国 软件 外 包 企 业已 经 与 印度 同行 展开 了 短兵相接 的 较 
量 , 但 是 经 常 感到 对 手 的 功力 深厚 ,而 自己 略 显 力不从心 。 与 此 同时 , 另 一 些 中 国 软件 外 
包 企业 另辟蹊径 ,从 为 客户 提供 多 种 形式 的 软件 测试 外 包 服务 做 起 , 近 两 年 在 日 本 、 美 国 
和 欧洲 等 全 球 主要 外 包 市 场 不 断 进取 ,逐步 探索 出 了 一 条 软件 外 包 服 务 的 新 路 。 

软件 测试 外 包 就 是 指 软 件 企业 将 软件 项 目 中 的 全 部 或 部 分 测试 工作 , 交 给 提供 软件 
外 包 测 试 服务 的 公司 ,由 它们 为 软件 进行 专门 的 测试 。 这 样 做 的 好 处 有 两 个 : 一 方面 软 
件 企 业 可 以 更 好 地 专注 核心 竞争 力 业务 ,同时 降低 软件 项 目 成 本 ; 另 一 方面 ,由 第 三 方 专 
业 的 测试 公司 进行 测试 ,无 论 在 技术 上 还 是 管理 上 ,对 提高 软件 测试 的 有 效 性 都 具有 重要 

软件 测试 外 包 行 业 前 景 非常 看 好 ,发 展 空间 很 大 。IDG 的 数据 显示 ,最 近 几 年 ,中 国 
的 软件 外 包产 业 年 均 增 长 率 超过 30% , 正 处 于 快速 发 展 的 阶段 。 从 市 场 来 看 ,选择 将 部 
分 软件 测试 工作 进行 外 包 的 公司 主要 是 微软 .IBM 等 国际 软件 旗舰 企业 ,它们 利用 第 三 
方 专业 软件 测试 公司 ,在 产品 发 布 前 对 软件 进行 一 系列 的 集成 测试 和 系统 测试 , 既 保 证 了 
测试 工作 的 全 面 性 ,又 节省 了 人 力 、 物 力 的 开销 。 最 重要 的 是 ,测试 结果 往往 好 于 这 些 软 
件 企业 最 初 的 预期 ,效果 非常 令 人 满意 。 软 件 企 业 和 提供 软件 外 包 测试 服务 的 公司 进行 
合作 ,只 要 达成 双赢 ,两 方 此 大 欢喜 ,这样 的 合作 就 会 越 来 越 多 ,项 目 也 会 越 做 越 大 。 

软件 测试 外 包 可 以 分 为 以 下 两 种 : 

第 一 种 , 甲 方 公司 将 项 目 完全 包 给 乙方 公司 ,由 乙方 公司 完全 出 人 力 物 力 , 在 乙方 所 
在 地 完成 项 目 ; 

第 二 种 , 甲 方 公司 “借用 ”乙方 公司 的 员工 , 同 甲 方 员 工 一 起 在 甲 方 公司 完成 项 目 。 


1. 国际 竞争 


全 球 和 中 国 的 软件 外 包 继续 呈现 高 速 发 展 的 态势 。 据 CCID 的 数据 显示 ,到 2009 
年 ,中 国 软件 外 包 市 场 的 规模 达到 45. 60 亿美 元 。 根 据 赛 迪 顾问 数据 统计 ,2005 一 2009 
年 期 间 , 随 着 中 国 对 欧美 软件 外 包 市 场 开拓 力度 的 加 大 ,美国 发 到 中 国 的 软件 外 包 项 目 市 
场 规模 年 复合 增长 率 高 达 50% 以 上 。 目 前 我 国 软件 外 包 服 务 的 现状 可 以 归结 为 : 在 日 本 
市 场 的 外 包 优势 较为 明显 ,在 欧美 市 场 实现 了 局 部 突破 ,但 是 要 占据 更 大 的 份额 仍然 任 重 
尽管 我 国 软件 外 包 在 日 本 外 包 市场 取 得 了 显著 成 功 ,但 是 日 本 的 软件 外 包 项 目 通常 
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报价 较 低 ,而 且 日 本 软件 规模 不 大 ,只 占 全 球 的 10%。 占 全 球 65% 且 外 包 利 渔 直 厚 的 美 
国 市 场 却 被 印度 所 控制 。 我 国 要 想 在 欧美 等 高 端 外 包 市 场 取得 实质 性 突破 ,关键 是 深入 
研究 外 包 服 务 的 内 容 特 征 , 充 分 发 挥 我 们 的 技术 和 市 场 优 势 , 尽 量 避 免 与 印度 和 爱尔兰 等 
正面 竞争 ,从 而 吸引 更 多 的 欧美 外 包 客户 发 包 到 中 国 市 场 。 


2. 中 国 软件 外 包 企业 


随 着 软件 全 球 化 竞争 的 日 益 加剧 ,客户 对 软件 质量 的 要 求 水 涨 船 高 。 为 了 提高 软件 
质量 ,降低 软件 开发 成 本 ,分 散 软件 外 包 风 险 ,软件 测试 外 包 成 为 发 展 迅 速 的 分 支 之 一 。 

据 资料 显示 ,国外 大 型 软件 测试 已 经 占 整 个 软件 项 目 成 本 的 40% 以 上 ,因此 软件 测 
试 外 包 服 务 的 收入 非常 可 观 。 软 件 测试 是 人 员 规 模 化 和 密集 型 技术 工作 ,软件 测试 和 软 
件 开发 人 员 的 最 佳 比例 应 该 是 1: 1 左右 ,而 当前 大 多 数 软 件 公 司 都 还 是 1 : 8 左右 。 我 
国 具 有 众多 的 掌握 软件 技术 的 各 类 测试 人 才 , 已 培养 了 近 60 万 名 软件 专业 人 员 ,转行 从 
事 软 件 测试 的 社会 人 员 每 年 都 在 增加 ,来 自 海外 的 留学 生 和 国外 大 型 软件 公司 的 人 数 也 
呈 增 长 态势 。 这 种 初 . 中 ,高 级 别 的 人 力 资源 优势 ,加 上 市 场 优势 和 技术 管理 优势 ,为 我 国 
发 展 软件 外 包 测 试 服务 提供 了 坚实 的 基础 ,软件 外 包 测试 服务 的 发 展 潜力 无 限 。 

深入 分 析 软 件 外 包 测 试 的 特点 ,软件 外 包 测 试 包含 了 非常 丰富 的 内 容 。 从 测试 的 软 
件 类 型 看 , 它 包含 了 操作 系统 、 通 用 办 公 软 件 、 垂 直行 业 软 件 等 的 外 包 测 试 。 我 国 已 经 成 
为 全 球 最 大 的 生产 和 制造 中 心 ,在 行业 软件 中 ,以 手机 和 家 电工 入 式 软件 为 代表 的 通信 行 
业 软 件 和 汽车 ,电子 行业 的 中 间 件 的 发 展 迅速 :成 为 具有 潜力 的 软件 外 包 领 域 。 

软件 国际 化 的 最 高 境界 就 是 本 地 化 。 随 着 国际 化 和 本 地 化 需求 的 深入 发 展 , 大 型 国 
际 化 软件 经 常 需要 发 布 几 十 种 语言 的 本 地 化 版 本 ,因此 多 语言 的 软件 本 地 化 测试 具有 和 较 
大 的 发 展 潜力 。 可 喜 的 是 ,我 国 的 一 些 软件 本 地 化 公司 凭借 之 前 为 美国 软件 公司 提供 中 
文 软件 本 地 化 服务 ,已 经 与 客户 形成 了 互相 信赖 的 客户 关系 ,完善 了 符合 外 包 测 试 要 求 的 
技术 流程 ,而 且 具 有 比较 明显 的 外 包 价格 优势 ,已 经 开始 为 美国 软件 客户 同时 提供 十 几 种 
语言 的 软件 本 地 化 测试 。 

软件 外 包 测 试 是 投入 回报 率 高 而 风险 很 低 的 服务 领域 .根据 北京 软件 外 包 测 试 服务 
公司 透露 的 信息 ,从事 欧美 大 型 软件 公司 的 软件 外 包 测 试 的 净利 润 都 在 20% 到 35% 左 
右 , 甚 至 更 高 。 而 面向 国内 市 场 的 软件 项 目 , 由 于 国内 不 规范 的 价格 竞争 ,国内 软件 企业 
的 利润 空间 急剧 缩小 ,甚至 净利 润 下 降 到 5% 以 下 ,已 经 威胁 到 国内 软件 公司 的 生存 。 

探索 我 国 软件 外 包产 业 的 发 展 道路 ,必须 分 析 国 际 软件 外 包 的 市 场 特点 ,发挥 我 们 的 
技术 和 市 场 优势 , 找 准 在 全 球 外 包 服 务 行业 的 自身 定位 ,从 某 一 个 具有 显著 优势 的 外 包 领 
域 人 手 , 不 断 打造 中 国外 包 服 务 的 品牌 。 因 此 .从 技术 定位 角度 考虑 ,虽然 软件 外 包 测 试 
的 技术 含量 不 太 高 ,但 对 现 阶段 的 中 国 软件 外 包 企业 却 是 最 适合 的 ,可 以 在 欧美 日 等 全 球 
市 场 率先 实现 全 面 突破 。 


3. 三 个 加 强 


对 于 准备 加 入 软件 外 包 服 务 的 公司 而 言 , 要 加 入 外 包 测试 服务 队伍 ,至少 需要 在 三 个 
方面 实现 加 强 。 
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(1) 争取 赢得 国际 软件 客户 的 信赖 。 中 国 软 件 业 在 空间 巨大 、 利 润 丰厚 的 欧美 高 端 
市 场 迟 迟 未 能 实现 外 包 突破 ,几乎 成 了 很 多 软件 业 人 士 永远 的 痛 。 目 前 在 软件 外 包 测 试 
方面 ,中 国 软件 外 包 服 务 公司 已 经 率先 取得 突破 ,但 要 赢得 更 多 全 球 客户 的 信赖 ,还 需要 
不 断 探索 和 实践 。 

(2) 完善 外 包 测 试 服务 流程 。 现 代 外 包 测 试 几乎 贯穿 软件 项 目 生命 周期 的 各 个 环 
节 , 需 要 分 布 在 世界 各 地 的 不 同 公 司 的 人 员 组 成 一 个 项 目 团 队 , 并 进行 有 效 交流 。 因 此 制 
订 满 足 软 件 外 包 测 试 的 科学 流程 并 得 到 客户 的 认可 ,才能 满足 国际 软件 外 包 测 试 的 要 求 。 

(3) 汇聚 大 量 外 包 专 业 人 才 。 外 包 测 试 属 于 为 客户 提供 技术 和 质量 服务 的 中 间 环 
节 , 符 合 软 件 外 包 测 试 服务 的 各 类 人 才 包 括 软件 测试 工程 师 ,测试 项 目 组 长 ,测试 经 理 等 。 
尽管 我 国 具有 较 多 的 初级 测试 技术 人 员 ,但 是 比较 缺少 精通 技术 ,擅长 管理 ,熟悉 欧美 市 
场 ,能 与 欧美 客户 有 效 沟通 的 高 级 专业 外 包 人 才 , 这 需要 软件 企业 和 高 校 培养 .引进 和 留 
住 优秀 高 级 专业 人 才 。 


4. 软件 测试 工程 师 做 外 包 测 试 的 优点 和 缺点 


1) 软件 测试 工程 师 做 外 包 测 试 的 优点 

第 一 ,可 以 接触 到 很 多 其 他 公司 接触 不 到 的 最 新 软 硬 件 产品 。 比 如 在 IBM, 所 有 的 
软件 都 是 可 以 在 内 网 中 使 用 的 。 而 在 微软 公司 ,在 还 没 正 式 发 布 新 的 Windows 以 前 ,就 
可 以 上 手 使 用 ,这 是 很 让 人 羔 莫 的 。 

第 二 ,可 以 学 到 很 多 技术 。 在 大 型 外 企 中 ,你 接触 到 的 同时 不 是 名 校 的 博士 .硕士 就 
是 海归 ,很 容易 学 到 新 技术 。 

第 三 ,更 多 的 培训 。 无 论 是 团队 内 部 培训 ,还 是 公司 组 织 的 新 技术 的 培训 讲座 ,这 些 
讲座 只 要 你 有 时 间 ,都 是 可 以 去 听 的 。 

2) 软件 测试 工程 师 做 外 包 测 试 的 缺点 

第 一 ,缺少 所 谓 的 归属 感 。 如 果 你 是 乙方 的 外 派 工 程 师 ,常年 在 甲 方 公司 工作 的 , 平 
时 根本 不 需要 回 外 包公 司 ,会 觉得 没有 归属 感 。 

第 二 ,很 少 有 白 盒 测试 。 外 包 测 试 绝 大 多 数 情况 都 是 做 黑 盒 测试 ,做 白 盒 测试 的 可 能 
性 就 小 了 很 多 。 

第 三 ,很 多 大 公司 规定 开源 产品 在 公司 是 不 允许 使 用 的 ,而 很 多 外 面 平 时 很 常用 的 软 
件 也 没 机 会 再 使 用 。 


9.4 对 软件 测试 工程 师 的 要 求 


随 着 软件 产业 的 发 展 , 与 软件 测试 相关 工作 正 逐 渐 成 为 软件 企业 生存 与 发 展 的 核心 。 
几乎 每 个 大 中 型 IT 企业 的 软件 产品 在 发 布 前 都 需要 大 量 的 质量 控制 .测试 和 文档 工作 ， 
而 这 些 工 作 必须 依靠 拥有 娴熟 技术 的 专业 软件 人 才 来 完成 。 软 件 测试 工程 师 就 是 这 样 的 
一 个 企业 重头 角色 。 
目前 的 现状 是 一 方面 企业 对 高 质量 的 测试 工程 师 需求 量 越 来 越 大 , 另 一 方面 国内 原 
来 对 测试 工程 师 的 职业 重视 程度 不 够 ,使 许多 人 不 了 解 测试 工程 师 具 体 是 从 事 什么 工作 。 
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国内 在 短期 将 出 现 测试 工程 师 严 重 短缺 的 现象 。 根 据 对 近期 网 络 招聘 IT 人 才情 况 的 了 
解 ,许多 正在 招聘 软件 测试 工程 师 的 企业 很 少 能 够 在 招聘 会 上 顺利 招聘 到 相应 人 才 。 

软件 测试 工程 师 简单 地 说 是 软件 开发 过 程 中 的 质量 检测 者 和 保障 者 ,负责 软件 质量 
的 把 闫 工作。 软件 测试 工程 师 (Software Testing Engineer) 的 主要 工作 职责 是 ,理解 产品 
的 功能 要 求 , 并 对 其 进行 测试 ,检查 软件 有 没有 缺陷 ,决定 软件 是 否 具 有 稳定 性 , 写 出 相应 
的 测试 规范 和 测试 用 例 。 总 之 ,软件 测试 工程 师 在 一 家 软件 企业 中 担当 的 是 质量 管理 角 
E ,及 时 纠 错 及 时 更 正 ,确保 产品 的 正常 运作 。 


9.4.1 软件 测试 工作 特点 


1. 软件 测试 工作 的 专业 优势 


D 就 业 竞争 相对 较 小 

人 才 供 不 应 求 让 软件 测试 人 员 的 就 业 竞争 压力 明显 小 于 同类 其 他 职业 ,有 利于 从 业 
者 的 身心 健康 。 另 外 ,由 于 软件 测试 在 我 国 起 步 较 晚 ,独立 设置 测试 部 门 、 对 测试 人 员 有 
强烈 需求 的 多 为 独 具 慧 眼 的 大 中 型 IT 企业 。 软 件 测试 人 才 不 需要 在 小 企业 积累 经 验 就 
能 获得 知名 企业 的 入 门 通行 证 ,工作 起 点 高 于 同类 其 他 职业 。 人 才 供 不 应 求 让 软件 测试 
人 员 的 就 业 竞 争 压力 明显 小 于 同类 其 他 职业 ,有 利于 从 业者 的 身心 健康 。 

2) 行业 整体 薪资 水 平 较 高 

刚 入 行 的 软件 测试 人 员 ,起 步 的 月 薪 就 在 3000 一 5000 元 左右 , 远 高 于 同龄 人 2000 元 
的 薪资 水 平 , 随 着 工作 经 验 的 丰富 以 及 能 力 的 提升 ,这 份 薪水 将 一 路 看 涨 ,甚至 超出 很 多 
相同 服务 年 限 的 软件 开发 人 员 的 薪资 水 平 。 

3) 就 业 质 量 高 

与 其 他 IT 职位 相 比 ,软件 测试 人 员 最 大 的 优势 就 是 发 展 方向 太 多 了 。 由 于 工作 的 
特殊 性 ,测试 人 员 不 但 需要 对 软件 的 质量 进行 检测 ,而且 对 于 软件 项 目的 立项 ,管理 、 售 
前 、 售 后 等 领域 都 要 涉及 。 在 此 过 程 中 ,测试 人 员 不 仅 提升 了 专业 的 软件 测试 技能 ,还 能 
接触 到 各 行 各 业 , 从 而 为 自己 的 多 元 化 发 展 葛 定 了 基础 。 

4) 无 性 别 歧 视 

软件 开发 .销售 、 维 护 等 领域 普遍 男性 较 多 。 而 软件 测试 行业 由 于 工作 的 特殊 性 , 软 
件 测试 人 员 更 要 具有 认真 .耐心 .细致 ,敏感 等 个 性 元 素 ,而 这 在 一 定 程度 上 与 女性 的 个 性 
气质 相 吻合 。 据 了 解 , 很 多 IT 企业 中 软件 测试 人 员 的 比例 更 趋向 男女 平衡 ,甚至 出 现 女 
性 员工 成 主流 的 情况 。 可 以 说 软件 测试 行业 无 性 别 歧视 。 

5) 有 利于 多 元 化 发 展 

与 其 他 IT 职位 相 比 ,软件 测试 人 员 最 大 的 优势 就 是 发 展 方向 多 元 化 。 由 于 工作 的 
特殊 性 ,测试 人 员 不 但 需要 对 软件 的 质量 进行 检测 ,而且 对 于 软件 项 目的 立项 ,管理 、 售 
前 、 售 后 等 领域 都 要 涉及 。 


2. 专业 技能 
计算 机 领域 的 专业 技能 是 测试 工程 师 应 该 必 备 的 一 项 素质 ,是 做 好 测试 工作 的 前 提 
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条 件 。 尽 管 没 有 任何 IT 背景 的 人 也 可 以 从 事 测 试 工作 ,但 是 一 名 要 想 获得 更 大 发 展 空 
间或 者 持久 竞争 力 的 测试 工程 师 , 则 计算 机 专业 技能 是 必 不 可 少 的 。 专 业 技 能 包括 测试 
专业 技能 、 软 件 编程 技能 、 网 络 .操作 系统 ,数据库 等 几 个 方面 。 

软件 编程 技能 实际 应 该 是 测试 人 员 的 必 备 技能 之 一 。 在 微软 ,很 多 测试 人 员 都 拥有 
多 年 的 开发 经 验 。 因 此 ,测试 人 员 要 想得到 较 好 的 职业 发 展 ,必须 能 够 编写 程序 。 只 有 能 
编写 程序 具备 软件 编程 技能 , 才 可 以 胜任 诸如 单元 测试 、 集 成 测试 ,性 能 测试 等 难度 较 大 
的 测试 工作 。 依 据 资深 测试 工程 师 的 经 验 ,测试 工程 师 至 少 应 该 掌握 Java、C#、C++ 之 
类 的 一 门 语言 以 及 相应 的 开发 工具 。 


3. 行业 知识 


行业 主要 指 测试 人 员 所 在 企业 涉及 的 行业 领域 ,例如 很 多 IT 企业 从 事 石油 .电信 、 
银行 .电子 政务 .电子 商务 等 行业 领域 的 产品 开发 。 行 业 知 识 即 业务 知识 ,是 测试 人 员 做 
好 测试 工作 的 又 一 个 前 提 条 件 , 只 有 深入 了 解 了 产品 的 业务 流程 , 才 可 以 判断 出 开发 人 员 
实现 的 产品 功能 是 否 正确 。 行 业 知 识 与 工作 经 验 有 一 定 关系 ,通过 时 间 即 可 以 完成 积累 。 

一 个 优秀 的 软件 测试 工程 师 除 了 有 具备 专业 技能 和 行业 知识 外 ,还 必须 具备 交流 技巧 、 
组 织 技能 、 实 践 技能 等 素质 。 


4. 个 人 素养 


作为 一 名 优秀 的 测试 工程 师 , 首 先 要 对 测试 工作 有 兴趣 : 测试 工作 很 多 时 候 都 是 显 
得 有 些 枯燥 的 ,因此 热爱 测试 工作 , 才 更 容易 做 好 测试 工作 。 因 此 ,除了 具有 前 面 的 专业 
技能 和 行业 知识 外 ,测试 人 员 应 该 具有 一 些 基 本 的 个 人 素养 , 即 专心 、 细 心 和 耐心 。 

专心 主要 指 测试 人 员 在 执行 测试 任务 的 时 候 要 专心 ,不 可 一 心 二 用 。 经 验 表明 ,高 度 
集中 精神 不 但 能 够 提高 效率 ,还 能 发 现 更 多 的 软件 缺陷 ,业绩 最 棒 的 往往 是 团队 中 做 事 精 
力 最 集中 的 那些 成 员 。 

细心 主要 指 执行 测试 工作 时 候 要 细心 ,认真 执行 测试 ,不 可 以 忽略 一 些 细节 。 某 些 缺 
陷 如 果 不 细 心 很 难 发 现 , 例 如 一 些 界面 的 样式 ,文字 等 。 

耐心 指 很 多 测试 工作 有 时 候 显得 非常 枯燥 ,需要 很 大 的 耐心 才 可 以 做 好 。 


5. 软件 测试 工程 师 就 业 前 景 


目前 ,大 学 计算 机 专业 普遍 开设 软件 测试 课程 ,很 多 培训 机 构 也 开设 了 软件 测试 人 才 
的 专业 培养 课程 ,其 培训 的 学 员 更 是 成 为 众多 IT 企业 争 抢 的 目标 。 

2013 年 11 月 27 日 在 “前 程 无 忧 ?网 站 www. 51job. com 上 搜索 “软件 测试 工程 师 ”， 
招聘 信息 为 4265 条 ,如 图 9-1 所 示 。 同 一 天 ,在 “58 同城 ”bj. 58. сот 上 搜索 “软件 测试 工 
程 师 ,招聘 信息 为 2933 条 ,如 图 9-2 所 示 。 

软件 测试 工程 师 成 为 IT 业 最 稀缺 人 才 。 据 前 程 无 忧 网 数据 显示 ,目前 国内 软件 测 
ЖАЛП 20 万 ,已 成 为 我 国 软件 产业 发 展 的 瓶颈 之 一 。 软 件 测试 人 才 需 求 量 的 加 
大 ,是 由 于 近年 来 我 国 软件 行业 的 产业 升级 所 决定 的 。 由 于 我 国 的 软件 行业 目前 突破 了 
作坊 时 代 , 由 以 前 软件 开发 的 单打 独 斗 升级 为 工业 化 、 流 水 线 式 的 生产 模式 ,作为 工业 化 
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的 产品 ,软件 测试 也 就 成 为 软件 开发 企业 必 不 可 少 的 质量 监控 部 门 ,而 目前 我 国 的 软件 测 
试 人 才 的 培养 数量 较 产 业 升级 相对 滞后 ,这 就 形成 了 软件 测试 人 才 的 供给 远 小 于 需求 


现状 。 
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(иже) ЕТЕ 


9.4.2 软件 测试 工程 师 


由 于 软件 测试 工程 师 处 于 重要 岗位 ,所 以 必须 具有 扎实 的 专业 知识 背景 ,并 且 还 应 有 
实际 操作 经 验 。 既 应 熟悉 中 国 和 国际 软件 测试 标准 ,熟练 掌握 和 操作 国际 流行 的 系列 软 
件 测试 工具 ,又 能 够 承担 比较 复杂 的 软件 分 析 、 测 试 . 品 质 管理 等 任务 。 

国内 软件 测试 工程 师 的 职位 从 无 到 有 ,现在 如 雨后春笋 般 莲 勃 增长 的 计算 机 软件 企 
业 对 优秀 软件 测试 工程 师 的 需求 旺盛 。 下 面 介 绍 软件 测试 工程 师 职位 分 类 、 软 件 测试 的 
工作 职责 和 软件 测试 工程 师 应 具有 的 素质 。 


1. 软件 测试 工程 师 的 分 类 


按 其 级 别 和 职位 的 不 同 ,软件 测试 工程 师 可 分 为 初级 软件 测试 工程 师 、 中 级 软件 测试 
工程 师 、 高 级 软件 测试 工程 师 三 类 。 

1) 初级 软件 测试 工程 师 

初级 软件 测试 工程 师 通 常 都 是 按照 软件 测试 方案 和 流程 对 产品 进行 功能 测验 ,检察 
产品 是 否 有 缺陷 。 基 本 以 黑 盒 功能 测试 为 主 。 此 类 测试 无 法 稳定 提供 软件 测试 的 深度 与 
广度 ,难以 真正 保证 软件 质量 。 初 级 测试 工程 师 的 责任 比较 简单 ,还 不 具备 完全 独立 的 工 
作 能 力 ,需要 资深 测试 工程 师 的 指导 ,主要 有 下 列 责任 : 

(1) 验证 产品 在 功能 、 界 面 上 是 否 和 产品 规格 说 明 书 一 致 。 

(2) 按照 要 求 ,执行 测试 用 例 ,进行 功能 测试 ,验收 测试 等 ,并 能 发 现 所 暴露 的 问题 。 

(3) 努力 学 习 新 技术 和 软件 工程 方法 ,不断 提高 自己 的 专业 水 平 。 

(4) 接受 测试 工程 师 的 指导 ,执行 主管 所 交代 的 其 他 工作 。 

(5) 清楚 地 描述 所 出 现 的 软件 问题 。 

(6) 使 用 简单 的 测试 工具 。 

2) 中 级 软件 测试 工程 师 

中 级 测试 工程 师 对 于 测试 技术 掌握 较为 全 面 , 但 是 缺乏 足够 的 经 验 积累 和 深度 钻研 。 
测试 工程 师 执行 的 测试 不 会 完全 停留 在 表面 ,会 有 意识 地 进行 深入 测试 ,如 检查 相应 的 数 
据 库 等 。 参 与 编写 软件 测试 方案 、 测 试 文档 ,与 项 目 组 一 起 制定 软件 测试 阶段 的 工作 计 
划 , 能 够 在 项 目 运 行 中 合理 利用 测试 工具 完成 测试 任务 。 中 级 测试 工程 师 的 主要 责任 
如 下 : 

(1) 熟悉 产品 的 功能 \ 特 性 ,审查 产品 规格 说 明 书 。 

(2) 根据 需求 文档 或 设计 文档 ,可 以 设计 功能 方面 的 测试 用 例 。 

(3) 根据 测试 用 例 ,执行 各 种 测试 ,发 现 所 暴露 的 问题 。 

(4) 安装 ,设置 简单 的 系统 测试 环境 。 

(5) 全 面 使 用 测试 工具 ,包括 测试 脚本 的 编写 。 

(6) 报告 所 发 现 的 软件 缺陷 ,审查 软件 缺陷 ,跟踪 缺陷 修改 的 情况 ,直到 缺陷 关闭 。 

(7) 负责 对 初级 测试 工程 师 的 指导 ,执行 主管 所 交代 的 其 他 工作 。 

(8) 撰写 测试 报告 。 
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软件 测试 行业 综述 


3) 高 级 软件 测试 工程 师 

高 级 软件 测试 工程 师 要 求 熟练 掌握 软件 测试 与 开发 技术 , 且 对 所 测试 软件 对 口 行业 
非常 了 解 ,能 够 对 可 能 出 现 的 问题 进行 分 析 评 估 。 测 试 专家 经 验 丰富 ,经 历 过 各 类 测试 实 
战 。 测 试 专家 能 够 根据 自己 的 经 验 ,进行 更 有 针对 性 的 测试 ,能 够 对 发 现 的 问题 进行 定 
位 。 缺 陷 的 发 现 率 与 定位 能 力 强 于 测试 工程 师 。 高 级 软件 测试 工程 师 的 主要 责任 如 下 : 

(1) 负责 系统 一 个 或 多 个 模块 的 测试 工作 。 

(2) 制订 某 个 模块 或 某 个 阶段 的 测试 计划 测试 策略 。 

(3) 设计 测试 环境 所 需 的 系统 或 网 络 结构 ,安装 、 设 置 复杂 的 系统 测试 环境 。 

(4) 熟悉 产品 的 功能 .特性 ,审查 产品 规格 说 明 书 ,并 提出 改进 要 求 。 

(5) 进行 代码 审查 。 

(6) 验证 产品 是 否 满足 了 规格 说 明 书 所 描述 的 需求 。 

(7) 根据 需求 文档 或 设计 文档 ,设计 复杂 的 测试 用 例 。 

(8) 负责 对 测试 工程 师 的 指导 ,执行 主管 所 交代 的 其 他 工作 。 

我 国 的 测试 正 处 于 发 展 过 程 中 ,发 展 时间 较 短 。 我 国 大 量 的 软件 测试 从 业 人 员 仍 停 
留 在 较 低 的 初级 测试 员 与 测试 工程 师 的 层次 中 ,高 级 软件 测试 工程 师 已 属 稀 缺 , 软 件 测试 
专家 更 是 风 毛 鹿角 。 


2. 软件 测试 团队 的 基本 构成 


一 个 比较 健全 的 测试 团队 应 该 具有 下 面 这 些 角色 。 

1) 测试 经 

人 员 招 聘 、 培 训 \、 管 理 , 资 源 调配 测试 方法 改进 等 。 

测试 经 理 的 主要 工作 在 团队 ,资源 和 项 目 等 管理 上 ,不同 于 测试 组 长 。 测 试 组 长 主要 
集中 在 项 目 管理 上 ,一 般 不 负责 测试 人 员 的 招聘 流程 定义 等 管理 工作 ,而 且 偏重 技术 。 
测试 经 理 对 产品 的 质量 负 全 面 责任 ,有 责任 向 公司 最 高 管理 层 反 映 软 件 开发 过 程 中 管理 
问题 或 产品 中 的 质量 问题 ,使 公司 能 全 面 掌 握 生 产 和 质量 状况 。 

2) 测试 组 长 

业务 专家 ,负责 项 目的 管理 ,测试 计划 的 制订 ,项 目 文档 的 审查 ,测试 用 例 的 设计 和 审 
查 , 任 务 的 安排 ,和 项 目 经 理 . 开 发 组 长 的 沟通 等 。 

测试 组 长 一 般 具备 资深 测试 工程 师 的 能 力 和 经 验 ,可 能 在 技术 上 相对 弱 些 ,不 是 小 组 
内 最 强 的 ,其 责任 偏重 测试 项 目的 计划 、 跟 踪 和 管理 .同时 负责 测试 小 组 的 团队 的 管理 和 
发 展 。 

3) 初级 测试 工程 师 

执行 测试 用 例 和 相关 的 测试 任务 。 

4) 实验 室 管理 人 员 

设置 .配置 和 维护 实验 室 的 测试 环境 ,主要 是 服务 器 和 网 络 环境 等 。 

5) 内 审 员 

审查 流程 ,并 提出 改进 流程 的 建议 : 建立 测试 文档 所 需 的 各 种 模板 ,检查 软件 缺陷 描 
述 及 其 他 测试 报告 的 质量 等 。 
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《软件 测试 技术 教程 》 


3. 软件 测试 的 工作 职责 


软件 测试 工程 师 简单 地 说 是 软件 开发 过 程 中 的 质量 检测 者 和 保障 者 ,负责 软件 质量 
的 把 关 工 作 。 软 件 测试 的 工作 职责 包括 : 

(1) 使 用 各 种 测试 技术 和 方法 来 测试 和 发 现 软件 中 存在 的 软件 缺陷 。 测 试 技术 主要 
分 为 黑 盒 测试 和 白 盒 测试 两 大 类 。 其 中 黑 盒 测 试 技术 主要 有 等 价 类 划分 法 ,边界 值 法 、 因 
果 图 法 ,状态 图 法 ,测试 大 纲 法 以 及 各 类 典型 的 软件 故障 模型 等 ; 白 盒 测试 的 主要 技术 有 
语句 覆盖 、 分 支 覆盖 、 判 定 材 盖 和 路 径 覆 盖 等 。 

(2) 测试 工作 需要 贯穿 整个 软件 开发 生命 周期 。 完 整 的 软件 测试 工作 包括 单元 测 
试 、 集 成 测试 .确认 测试 和 系统 测试 工作 。 单 元 测试 工作 主要 在 编码 阶段 完成 ,由 开发 人 
员 和 软件 测试 工程 师 共同 完成 ,其 主要 依据 是 详细 测试 。 集 成 测试 的 主要 工作 测试 软件 
模块 之 间 的 接口 是 否 正确 实现 ,基本 依据 是 软件 体系 结构 设计 。 确 认 测 试 和 系统 测试 是 
在 软件 开发 完成 后 ,验证 软件 的 功能 与 需求 的 一 致 性 、 验 证 软件 在 相应 的 硬件 条 件 下 的 系 
统 功 能 是 否 满足 用 户 需 求 。 

(3) 测试 人 员 将 发 现 的 缺陷 编写 成 正式 的 缺陷 报告 ,提交 给 开发 人 员 进 行 缺陷 的 确 
认 和 修复 。 缺 陷 报告 编写 最 主要 的 要 求 是 保证 缺陷 的 重 现 。 要 求 测试 人 员 具 有 很 好 的 文 
字 表 达能 力 和 语言 组 织 能 力 。 

(4) 测试 人 员 需 要 分 析 软 件 质量 。 在 测试 完成 后 ,测试 人 员 需 要 根据 测试 结果 来 分 
析 软 件 质量 ,包括 缺陷 率 、 缺 陷 分 布 ` 缺 陷 修复 趋势 等 。 给 出 软件 各 种 质量 特性 ,包括 功能 
性 、 可 靠 性 、 易 用 性 、 安 全 性 、 时 间 与 资源 特性 等 的 具体 度量 。 最 后 给 出 一 个 软件 是 否 可 以 
发 布 或 提交 用 户 使 用 的 结论 。 

(5) 测试 过 程 中 ,为 了 更 好 地 组 织 与 实施 测试 工作 ,测试 负责 人 需要 制定 测试 计划 ， 
包括 测试 资源 、 测 试 进度 ,测试 策略 ` 测 试 方法 、. 测 试 工具 ,测试 风险 等 。 为 了 提高 工作 效 
率 或 提高 测试 水 平 ,测试 工作 需要 引进 自动 化 测试 工具 是 必 不 可 少 的 ,测试 人 员 需 要 学 会 
使 用 自动 化 测试 工具 ,编写 测试 脚本 ,进行 性 能 测试 等 。 

(6) 测试 项 目 负责 人 在 测试 工作 中 ,还 需要 根据 实际 情况 不 断 改 进 测试 过 程 ,提高 测 
试 水 平 ,进行 测试 队伍 的 建设 等 。 

软件 测试 人 员 必 须 具 有 创新 性 和 综合 分 析 能 力 , 必 须 具 备 判断 准确 .追求 完美 、 执 著 
认真 、 善 于 合作 的 品质 ,以 及 具有 丰富 的 编程 经 验 与 查 检 故 障 的 能 力 。 在 具体 工作 过 程 
中 ,测试 工程 师 的 工作 是 利用 测试 工具 按照 测试 方案 和 流程 对 产品 进行 功能 和 性 能 测试 ， 
甚至 根据 需要 编写 不 同 的 测试 用 例 ,设计 和 维护 测试 系统 ,对 测试 方案 可 能 出 现 的 问题 进 
行 分 析 和 评估 。 对 软件 测试 工程 师 而 言 ,必须 具有 高 度 的 工作 责任 心 和 自信 心 。 任 何 严 
格 的 测试 必须 是 一 种 实事 求 是 的 测试 ,因为 它 关系 到 一 个 产品 的 质量 问题 ,而 测试 工程 师 
则 是 产品 出 货 前 的 把 关 人 ,所 以 ,没有 专业 的 技术 水 准 是 无 法 胜任 这 项 工作 的 。 同 时 ,由 
于 测试 工作 一 般 由 多 个 测试 工程 师 共同 完成 ,并 且 测 试 部 门 一 般 要 与 其 他 部 门 的 人 员 进 
行 较 多 的 沟通 ,软件 测试 工程 师 不 但 要 有 较 强 的 技术 能 力 而 且 要 有 较 强 的 沟通 能 力 。 
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4. 软件 测试 工程 师 应 具有 的 素质 


软件 测试 工作 的 重要 性 是 显而易见 的 ,这 样 就 使 得 测试 工程 师 要 具备 一 定 的 工作 素 
质 。Bill Hetzel 在 其 编写 的 “The Complete Guide to Software Testing” 一 书 中 对 一 个 优 
秀 的 软件 测试 专家 应 该 具备 的 特征 总 结 为 5C, 即 Controlled (接受 管理 、 有 条 理 )、 
Competent( 了 解 正确 的 测试 技术 )、Critical( 专 注 于 发 现 问题 )、Comprehensive (注意 细 
节 )、Considerate( 能 够 与 开发 人 员 很 好 地 交流 )。 一 个 好 的 测试 人 员 至 少 具 备 以 下 一 些 
素质 。 

1) 扎实 的 专业 技能 

专业 技能 是 测试 工程 师 应 该 必 备 的 首要 素质 ,是 做 好 测试 工作 的 前 提 条 件 。 专 业 技 
能 则 是 必 不 可 少 的 ,专业 技能 主要 包含 以 下 三 个 方面 。 

(1) 测试 专业 技能 。 测 试 专业 技能 涉及 的 范围 很 广 : 既 包 括 黑 盒 测 试 、 白 盒 测 试 、 测 
试用 例 设 计 等 基础 测试 技术 ,也 包括 单元 测试 、 功 能 测试 .集成 测试 .系统 测试 ,性 能 测试 
等 测试 方法 ,还 包括 基础 的 测试 流程 管理 .缺陷 管理 .自动 化 测试 技术 等 知识 。 

(2) 软件 编程 技能 。 软 件 编程 技能 实际 应 该 是 测试 人 员 的 必 备 技能 之 一 ,在 微软 ,很 
多 测试 人 员 都 拥有 多 年 的 开发 经 验 。 因 此 ,测试 人 员 要 想得到 较 好 的 职业 发 展 , 必 须 能 够 
编写 程序 。 只 有 能 编写 程序 , 才 可 以 胜任 诸如 单元 测试 .集成 测试 .性 能 测试 等 难度 较 大 
的 测试 工作 。 

(3) 网 络 .操作 系统 .数据库 .中 间 件 等 知识 。 作 为 一 名 测试 人 员 ,尽管 不 能 精通 所 有 
的 知识 ,但 要 想 做 好 测试 工作 ,应 该 尽 可 能 地 去 学 习 更 多 的 与 测试 工作 相关 的 知识 。 

2) 良好 的 心理 状态 

目前 测试 工程 师 的 一 个 心 结 可 能 是 认为 测试 工作 地 位 不 高 ,前 途 迷茫 。 或 许 测试 工 
程 师 在 开发 能 力 不 如 程序 员 , 但 其 他 方面 却 不 见得 不 如 程序 员 。 众 所 周知 ,软件 测试 工程 
师 涉 及 的 面 要 比 程序 员 多 ,工作 的 对 象 也 比 开 发 人 员 要 广 , 程 序 员 也 许 只 懂 一 种 产品 的 技 
术 , 但 测试 工程 师 却 要 了 解 多 种 产品 ,所 以 测试 工程 师 必 须要 端正 自己 的 心态 。 只 有 端正 
了 心态 ,工作 时 才 会 踏实 细心 , 才 会 认真 负责 ,毕竟 软件 测试 工程 师 多 数 是 枯燥 无 味 的 重 
复 性 工作 ,如 果 不 踏实 工作 ,就 很 难 发 现 产 品 中 的 缺陷 。 

开发 人 员 指责 测试 人 员 出 了 错 是 常 有 的 事 ,测试 工程 师 必 须 对 自己 的 观点 有 足够 的 
自信 心 ,对 自己 所 报 的 缺陷 有 信心 。 如 果 没 有 信心 或 受 开发 人 员 影 响 过 大 ,测试 工作 就 缺 
乏 独 立 性 ,程序 中 的 漏洞 或 缺陷 容易 被 忽略 过 去 ,就 谈 不 上 保证 软件 产品 的 质量 。 

软件 测试 工作 还 要 有 足够 的 耐心 。 有 时 需要 花费 惊人 的 时 间 去 分 离 .识别 一 个 错误 ， 
需要 对 其 中 一 个 测试 用 例 运行 几 十 遍 、 甚 至 几 百 遍 , 了 解 错误 在 什么 情况 .或 什么 平台 
才 发 生 。 耐 心 是 测试 工程 师 必 备 的 素质 。 

3) 要 具有 怀疑 一 切 的 态度 

软件 测试 工程 师 的 工作 是 测试 ,而 测试 最 主要 的 任务 是 尽 可 能 地 找 出 产品 中 的 缺陷 ， 
没有 人 说 自己 开发 的 产品 根本 没有 缺陷 。 作 为 软件 测试 工程 师 , 必 须要 持 怀 疑 的 态度 去 
测试 每 个 产品 ,因为 产品 最 终 是 面向 用 户 的 ,而 用 户 的 层次 是 不 相同 的 ,有 些 用 户 的 水 平 
和 对 产品 的 理解 比 研发 设计 人 员 还 要 精深 ,所 以 一 定 要 抱 着 怀疑 一 切 的 态度 ,认为 产品 每 
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个 功能 都 可 能 有 问题 ,认真 地 测试 产品 的 每 一 个 测试 点 ,他 们 不 会 把 缺陷 当 作 偶然 而 轻易 
放 过 ,而 会 想 尽 一 切 可 能 去 发 现 它们 ,软件 测试 员 不 放 过 蛛丝马迹 。 

4) 具有 准确 的 判断 力 

一 个 好 的 测试 工程 师 具 有 一 种 先天 的 敏感 性 及 准确 的 判断 力 , 并 且 还 能 尝试 着 通过 
一 些 巧 妙 的 变化 去 发 现 问 题 。 同 时 ,还 具有 强烈 的 质量 追求 ,对 细节 的 关注 能 力 。 应 用 的 
高 风险 区 的 判断 力 以 便 将 有 限 的 测试 针对 重点 环节 。 

5) 具有 协作 和 团队 精神 

软件 开发 和 测试 是 一 个 团队 ,在 一 个 项 目 中 是 同等 重要 的 。 测 试 的 最 终 目的 是 提高 
产品 的 工程 设计 和 生命 周期 ,也 是 一 种 开发 的 过 程 。 所 以 软件 测试 工程 师 必须 要 有 好 的 
协作 和 团队 精神 ,这 样 才能 提高 开发 效率 ,保证 产品 质量 。 

6) 良好 的 沟通 能 力 

软件 测试 工程 师 属于 服务 型 的 工作 ,要 为 多 个 对 象 服务 , 那 就 要 求 测试 人 员 具 有 良好 
的 沟通 能 力 。 如 果 沟 通 能 力 有 限 ,就 不 能 清晰 地 向 开发 人 员 描述 BUG 的 症状 以 及 可 能 
存在 的 原因 ;如 果 沟 通 能 力 有 限 , 就 不 能 清楚 地 向 主管 和 项 目 经 理 反馈 测试 状态 ;如 果 沟 
通 能 力 有 限 , 遇 到 偶然 性 出 现 的 缺陷 时 就 会 不 知 所 措 , 相 应 的 就 会 影响 产品 的 质量 。 

据 报道 ,在 国外 大 多 数 软件 公司 ,一 名 软件 开发 工程 师 就 需要 配备 两 名 软件 测试 工程 
师 。 目 前 ,软件 测试 自动 化 技术 在 我 国 刚刚 被 少数 业内 专家 所 认 知 ,而 这 方面 的 专业 技术 
人 员 在 国内 更 是 风 毛 鹿角。 根据 对 近期 网 络 招聘 计算 机 人 才情 况 的 了 解 , 许 多 正在 招聘 
软件 测试 工程 师 的 企业 很 少 能 够 在 招聘 会 上 顺利 招 到 合适 的 人 才 。 

随 着 中 国 计 算 机 行业 的 发 展 ,从 计算 机 硬件 、 软 件 到 系统 集成 ,几乎 每 个 中 大 型 计算 
机 企业 的 产品 在 发 布 前 都 需要 大 量 的 质量 控制 ,测试 和 文档 工作 ,而 这 些 工作 必须 依靠 拥 
有 娴熟 技术 的 专业 软件 人 才 来 完成 。 而 软件 测试 工程 师 就 是 其 中 热门 职业 之 一 。 


9.5 ”软件 测试 工程 师 考试 


很 多 朋友 经 过 刻苦 的 学 习 , 准 备 到 公司 做 一 名 软件 测试 工程 师 。 即 可 以 换 一 份 待遇 
好 、 环 境 好 的 工作 ,又 有 自己 用 武之 地 。 


1. 软件 测试 工程 师 面 试 准备 


招聘 和 面试 软件 测试 工程 师 大 致 分 以 下 三 步 。 

第 一 步 , 投 递 简历 。 

投递 简历 ,让 招聘 公司 发 现 你 ,一 般 有 三 种 方式 : 

(1) 通过 招聘 网 站 搜索 测试 招聘 信息 ,选择 合适 的 公司 和 职位 ,投递 简历 。 

(2) 通过 招聘 网 站 发 布 自己 的 简历 ,等 待 招聘 公司 发 现 并 下 载 你 的 简历 。 

(3) 通过 招聘 会 ,现场 投递 简历 。 

目前 ,国内 知名 的 人 才 招 聘 网 站 : 中 华 英才 网 (www. chinahr. сот) ,51)оҺ 前 程 无 忧 
(www. 51job. сот) 、 卓 博 (www. joben. сот) ,中 国 国家 人 才 网 (www. newsjob. сот. сп), 
北京 人 才 网 (www. bjrc. com) 等 。 还 有 一 些 专业 的 软件 测试 网 站 ,如 领 测 软件 测试 网 论 
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坛 (bbs. ltesting. net) 的 求职 招聘 专区 ,有 很 多 企业 发 布 软件 测试 工程 师 的 招聘 信息 ,也 
是 很 好 的 渠道 。 如 果 想 被 猎头 看 重 , 那 就 赶快 注册 登记 ,很 快 将 会 有 一 大 堆 公 司 给 你 打 电 
话 ,通知 你 去 面试 ,这 就 是 前 面 所 说 的 第 (2) 种 方式 。 一 般 说 来 ,你 在 人 才 网 上 发 布 简历 找 
工作 的 同时 ,猎头 公司 也 在 找 你 ,所 以 说 ,(1)、(2) 两 种 方式 结合 使 用 。 第 (3) 种 招聘 方式 ， 
近 些 年 已 经 有 逐渐 减少 的 趋势 ,因为 招聘 会 有 时 间 限 制 ,还 要 跑 到 现场 ,在 人 山 人 海中 搜 
寻 符 合 自己 条 件 的 公司 和 职位 ,投递 简历 并 进行 简单 面试 , 既 费 时 、 费 力 ,效果 也 不 佳 。 

第 二 步 , 准 备 面试 。 

首先 要 了 解 公司 情况 , 正 所 谓 知 己 知 彼 , 百 战 不 殉 。 看 看 公司 是 否 有 你 所 关注 的 地 
方 , 比 如 公司 的 规模 、 办 公 地 点 ,测试 组 的 情况 等 ,最 主要 的 要 知道 公司 的 主要 业务 ,测试 
什么 ,软件 还 是 硬件 ,那个 行业 的 ,做 到 心中 有 数 。 

其 次 要 注意 言谈 举止 和 穿着 。 

言谈 举止 要 透 出 一 股 自 信 , 让 人 感觉 你 就 是 很 有 能 力 , 什 么 任务 都 可 以 放心 地 交 给 你 
去 做 ,你 都 能 圆满 完成 。 面 试 的 关键 就 是 语言 表达 ,看 你 是 否 能 够 很 有 条 理 的 把 自己 的 经 
历 .知识 .技能 表达 清楚 ,并且 在 讲 的 过 程 中 ,注意 观察 招聘 方 的 表情 ,看 人 家 是 否 感 兴趣 ， 
如 果 人 家 皱眉 头 , 表 情 不 悦 ,就 尽快 结束 自己 的 话题 。 因 此 ,在 面试 之 前 ,你 可 以 自己 练习 
练习 。 

陌生 人 见面 ,第 一 印象 很 重要 ,你 给 招聘 方 的 第 一 印象 ,主要 通过 衣着 来 表现 。 搞 技 
术 的 软件 测试 工程 师 , 不 能 穿 得 太 随便 。 所 以 在 面试 时 ,一定 要 穿 洁净 .整齐 的 职业 装 。 

第 三 步 , 参 加 面试 。 

在 约定 的 时 间 ` 约 定 的 地 点 ,你 最 好 准时 出 现 , 如 果 不 能 准时 赴约 ,一 定 要 提前 打 电 
话 ,告知 对 方 是 什么 原因 导致 你 迟到 ,多 长 时 间 以 后 能 你 到 达 约 定 地 点 。 进 入 公司 ,会 有 
接待 人 员 招呼 你 坐 下 ,通知 招聘 负责 人 接待 你 面试 ,此 间接 待人 员 会 给 你 送 上 来 一 杯 水 。 

如 果 是 笔试 ,会 规定 一 定 的 时 限 ,到 时 间 人 事 部 门 的 人 会 来 收 卷 。 试 卷 的 命题 一 般 分 
为 填空 .选择 .判断 .逻辑 推理 程序 改 错 、 简 答 ,也 有 让 你 找 bug 的 题 ,这些 题 给 人 的 感觉 
都 是 在 简单 中 透漏 着 深度 。 


2. 全 国 计 算 机 等 级 考试 一 一 软件 测试 工程 师 考试 


软件 测试 是 保证 软件 质量 的 关键 步骤 ,目前 国内 很 多 软件 企业 中 软件 开发 和 软件 测 
试 人 员 的 配 比 仅 能 达到 8 : 1, 像 微软 .IBM 等 大 型 公司 中 ,这 个 比例 甚至 能 达到 1 : 2, 即 
一 位 软件 开发 人 员 至 少 与 两 位 测试 人 员 在 配合 工作 。 两 相 比 较 ,国内 软件 测试 人 才 的 缺 
口 巨 大 。 就 整体 而 言 ,测试 行业 目前 还 存在 技能 不 均衡 ,软件 测试 人 员 的 水 平 也 良 劳 不 
齐 , 对 测试 过 程 方法 技术 等 的 规范 化 也 不 是 很 系统 。 随 着 软件 企业 的 发 展 ,软件 企业 对 软 
件 测试 人 才 的 需求 和 要 求 在 不 断 提高 ,对 软件 测试 人 才 技 能 的 认定 和 指导 也 非常 必要 。 

国内 权威 的 软件 测试 考试 是 教育 部 考试 中 心 于 2010 年 开始 推出 的 “全 国 计 算 机 等 级 
考试 一 一 四 级 软件 测试 工程 师 考试 "。 通 过 复习 和 考试 可 以 帮助 考生 掌握 软件 工程 和 软 
件 质 量 保证 的 基础 知识 ,掌握 软件 测试 的 基本 理论 、 方 法 和 技术 ,理解 软件 测试 的 规范 和 
标准 ,熟悉 软件 测试 过 程 ,了 解 软 件 测试 过 程 管理 ,最 终 满足 软件 测试 岗位 的 要 求 。 
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№ 


题 


. 简 述 我 国 软件 测试 产业 的 现状 。 

. 我 国 软件 测试 产业 大 致 经 历 了 几 个 发 展 阶段 ? 

. 简 述 我 国 的 软件 测试 外 包 。 

. 软件 测试 工程 师 的 分 哪 几 类 ? 主要 负责 什么 工作 ? 
. 简 述 软件 测试 人 员 职 位 和 责任 。 


л о мә н 
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附录 A 基本 术语 (中 英文 词汇 ) 


Acceptance Testing 
Accessibility Test 
Actual Outcome 
Algorithm 
Algorithm Analysis 
Alpha Testing 
Analysis 

Anomaly 
Application Software 
Application Under Test 
Architecture 

Artifact 

Assertion Checking 
Audit 

Audit Trail 


Automated Testing 


Backus-Naur Form 
Baseline 

Basic Block 

Basis Test Set 

Behaviour 

Bench Test 

Benchmark 

Best Practise 

Beta Testing 

Black Box Testing 
Bottom-up Testing 
Boundary Value Testing 
Boundary Values 

Boundry Value Analysis 
Branch 

Branch Condition 

Branch Condition Combination Coverage 
Branch Condition Coverage 


Branch Condition Testing 


验收 测试 
适用 性 测试 
实际 结果 
算法 
算法 分 析 
а 测试 
分 析 

异常 

应 用 软件 
所 测试 的 应 用 程序 
体系 结构 
工件 

断言 检查 
审计 

审计 跟踪 
自动 化 测试 


ВМЕ 范式 

基线 

基本 块 

基本 测试 集 
行为 

基准 测试 
标杆 /指标 /基准 
最 佳 实践 

В 
MAWR 

自 底 向 上 测试 
边界 值 测试 
边界 值 
边界 值 分 析 
分 支 

分 支 条件 

分 支 条 件 组 合 覆盖 
分 支 条 件 覆盖 
分 支 条 件 测试 


Branch Coverage 分 支 覆盖 


Branch Outcome 分 支 结果 
Branch Point 分 支点 
Branch Testing 分 支 测 试 
Breadth Testing 广度 测试 
Brute Force Testing 强力 测试 
Buddy Test 合伙 测试 
Buffer 缓冲 
Bug 缺陷 
Bug Bash 错误 大 扫除 
Bug Fix 错误 修正 
Bug Report 错误 报告 
Bug Tracking System 错误 跟踪 系统 
Build Verification Tests 版 本 验证 测试 
Build 工作 版 本 
Build-in ян 

С 
Capability Maturity Model (СММ) 能 力 成 熟 度 模型 
Capability Maturity Model Integration (CMMI) 能 力 成 熟 度 模型 整合 
Capacity Test 容量 测试 
Сарішге/ Керіау Tool 捕获 /回放 工具 
Cause-Effect Graph 因果 图 
Certification 验证 
Change Control 变更 控制 
Change Management 变更 管理 
Change Request 变更 请 求 
Character Set 字符 集 
Check In RA 
Check Out 检 出 
Closeout 收尾 
Code Audit 代码 审计 
Code Coverage 代码 覆盖 
Code Inspection 代码 审查 
Code Page 代码 页 
Code Rule 编码 规范 
Code Style 编码 风格 
Code Walkthrough 代码 走读 
Code-Based Testing 基于 代码 的 测试 
Coding Standards 编程 规范 
Common Sense 常识 
Compatibility Testing 兼容 性 测试 
Complete Path Testing 完全 路 径 测 试 
Completeness 完整 性 
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Complexity 

Component 

Component Testing 
Computation Data Use 
Computer Aided Software Testing 
Computer Aided Software Engineering 
Computer System Security 
Concurrency User 
Condition Coverage 
Condition Outcome 
Condition 

Configuration Control 
Configuration Item 
Configuration Management 
Configuration Testing 
Conformance Criterion 
Conformance Testing 
Consistency 

Consistency Checker 
Control Flow 

Control Flow Graph 
Conversion Testing 

Core Team 

Corrective Maintenance 
Correctness 

Coverage Item 

Coverage 

Crash 

Criticality 

Criticality Analysis 
CRM(Change Request Management) 


Data Corruption 

Data Definition 

Data Definition C-use Pair 
Data Definition P-use Coverage 
Data Definition P-use Pair 
Data Definition-Use Coverage 
Data Definition-Use Pair 

Data Definition-Use Testing 
Data Dictionary 

Data Flow Analysis 


Data Flow Coverage 


复杂 性 

组 件 

组 件 测 试 

计算 数据 使 用 
计算 机 辅助 测试 
计算 机 辅助 软件 工程 
计算 机 系统 安全 性 
并 发 用 户 

条 件 覆盖 

条 件 结果 

条 件 

配置 控制 

配置 项 

配置 管理 

配置 测试 
一 致 性 标准 
一 致 性 测试 

一 致 性 
一 致 性 检查 器 
控制 流 

控制 流 图 

转换 测试 

核心 小 组 

故障 维护 

正确 性 

ты 

覆盖 
崩溃 
关键 性 
关键 性 分 析 
变更 需求 管理 


率 


数据 污染 

数据 定义 

数据 定义 C-use 使 用 对 
数据 定义 P-use 覆盖 
数据 定义 P-use 使 用 对 
数据 定义 使 用 覆盖 
数据 定义 使 用 对 

数据 定义 使 用 测试 
数据 字典 

数据 流 分 析 
数据 流 覆盖 
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Data Flow Diagram 
Data Flow Testing 
Data Integrity 

Data Use 

Data Validation 

Dead Code 

Debug 

Debugging 

Decision Condition 
Decision Coverage 
Decision Outcome 
Decision Table 
Decision 

Defect 

Defect Density 

Defect Tracking 
Deployment 

Depth Testing 

Design Of Experiments 
Design-Based Testing 
Desk Checking 

Detail Test Plan 
Determine Potential Risks 
Determine Usage Model 
Diagnostic 

Dirty Testing 

Disaster Recovery 
Documentation Testing 
Domain 

Domain Testing 
Dynamic Analysis 


Dynamic Testing 


Embedded Software 
Emulator 

End-to-End Testing 
Enhanced Request 

Entity Relationship Diagram 
Entry Criteria 

Entry Point 

Envisioning Phase 
Equivalence Class 


Equivalence Partition Coverage 
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数据 流 图 
数据 流 测 试 
数据 完整 性 
数据 使 用 
数据 确认 

死 代 码 

调试 

调试 

判定 条 件 
判定 覆盖 
判定 结果 
判定 表 

判定 

缺陷 

缺陷 密度 
缺陷 跟踪 
部 署 

深度 测试 
实验 设计 
基于 设计 的 测试 
桌 前 检查 
详细 确认 测试 计划 
确定 潜在 风险 
确定 应 用 模型 
诊断 

脏 脏 测试 
灾难 恢复 
文档 测试 

域 

域 测试 
动态 分 析 
动态 测试 


嵌入 式 软件 
仿真 
端 到 端 测试 
增强 请 求 
实体 关系 图 
准 入 条 件 

入 口 点 

构想 阶段 
等 价 类 
等 价 划分 覆盖 


Equivalence Partition Testing 
Equivalence Partitioning 
Error 

Error Guessing 

Error Seeding 
Event-Driven 

Exception 

Exception Handlers 
Exception 

Executable Statement 
Exhaustive Testing 
Exit Point 

Expected Outcome 


Exploratory Testing 


F 
Failure 
Failure Modes and Effects Analysis 
Failure Modes and Effects Criticality Analysis 
Fault Tree Analysis 
Fault 
Feasible Path 
Feature Testing 
Field Testing 
Framework 
Functional Decomposition 
Functional Specification 
Functional Testing 
G 
Globalization 
Gap Analysis 
Garbage Characters 
Glass Box Testing 
Glossary 
Graphical User Interface(GUD 
H 
Hard-Coding 
Hotfix 
I 


Internationalization 

Identify Exploratory Tests 

Institute of Electrical and Electronic Engineers(IEEE) 
Incident 


Incremental Testing 


参考 等 价 划分 测试 
等 价 划分 

错误 

错误 猜测 
错误 播种 /错误 插值 
事件 驱动 

异常 /例外 
异常 处 理 器 

异常 /例外 

可 执行 语句 
穷尽 测试 

出 口 点 

期 望 结果 
探索 性 测试 


失效 

失效 模型 效果 分 析 
失效 模型 效果 关键 性 分 析 
故障 树 分 析 

故障 

可 达 路 径 

特性 测试 

现场 测试 

框架 

功能 分 解 

功能 规格 说 明 书 
功能 测试 


全 球 化 
差距 分 析 
乱码 字符 

白 盒 测试 
术语 表 

图 形 用 户 界面 


硬 编码 
热 补丁 


国际 化 

识别 探索 性 测试 

美国 电子 与 电器 工程 师 学 会 
事故 

渐 增 测试 
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Infeasible Path 
Input Domain 


Inspection 
Installability Testing 
Installing Testing 
Instrumentation 
Instrumenter 
Integration 
Integration Testing 
Interface 

Interface Analysis 
Interface Testing 
Invalid Inputs 
Isolation Testing 
Issue 

Iteration 


Iterative Development 


Job 


Job Control Language 


Key Concepts 
Key Process Area 
Keyword Driven Testing 
Kick-Off Meeting 

L 
Localization 
Lag Time 
LCSAJ Coverage 
LCSAJ Testing 
Lead Time 
Load Testing 
Localization Testing 
Logic Analysis 


Logic-Coverage Testing 


Main Test Plan 
Maintainability 
Maintainability Testing 
Maintenance 

Master Project Schedule 
Measurement 


Memory Leak 
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不 可 达 路 径 
输入 域 
审查 

可 安装 性 测试 
安装 测试 
插 装 

插 装 器 
集成 

集成 测试 
接口 

接口 分 析 
接口 测试 
无 效 输入 
隔离 测试 
问题 

和 迭代 

和 迭代 开发 


王 作 
工作 控制 语言 


关键 概念 
关键 过 程 区 域 
关键 字 驱 动 测试 
启动 会 议 


本 地 化 
延迟 时 间 
LCSAJ 覆盖 
LCSAJ 测试 
前 置 时 间 
负载 测试 

本 地 化 测试 
逻辑 分 析 
逻辑 覆盖 测试 


主 确认 计划 
可 维护 性 

可 维护 性 测试 
维护 

总 体 项 目 方案 
度量 

内 存 泄 露 


基本 术语 (中 英文 i 


Migration Testing 迁移 测试 
Milestone 里 程 碑 
Mock Up 模型 ,原型 
Modified Condition/Decision Coverage 修改 条 件 / 判 定 覆盖 
Module Testing 模块 测试 
Monkey Testing 跳跃 式 测 试 
Mouse Leave 鼠标 离开 对 象 
Mouse Over 鼠标 在 对 象 之 上 
MTBF 平均 失效 间隔 时 间 
MTP 主 确认 计划 
МТТЕ 平均 失效 时 间 
MTTR 平均 修复 时 间 
Multiple Condition Coverage 多 条 件 覆 盖 
Mutation Analysis 变异 分 析 
Mutation Testing 变异 测试 

N 
М/А 不 适用 的 
Negative Testing 道 向 测试 , 反 向 测试 , 负面 测试 
Nominal Load 额定 负载 
Non-Functional Requirements Testing 非 功 能 需求 测试 
N-Switch Coverage N 切换 覆盖 
N-Transitions N 转换 

о 
Off-The-Shelf Software 套装 软件 
Operational Testing 可 操作 性 测试 
Output Domain 输出 域 

Р 
Pair Programming 成 对 编程 
Paper Audit 书面 审计 
Partition Testing 分 类 测试 
Path Coverage 路 径 覆 盖 
Path Sensitizing 路 径 敏 感性 
Path 路 径 
Peer Review 同行 评审 
Performance 性 能 
Performance Indicator 性 能 指标 
Performance Testing 性 能 测试 
Pilot 试验 
Pilot Testing 试验 测试 
Portability 可 移植 性 
Portability Testing 可 移植 性 测试 
Positive Testing 正 向 测试 
Postcondition 后 置 条 件 


245 


《软件 测试 技术 教程 》 


Precondition 前 提 条 件 
Predicate 谓词 
Predicate Data Use 谓词 数据 使 用 
Priority 优先 级 
Program Instrumentation 程序 插 装 
Progressive Testing 递 进 测试 
Prototype 原型 
Pseudo Code 伪 代 码 
Pseudo-Localization Testing 伪 本 地 化 测试 
Pseudo-Random 伪 随 机 

Q 
QC 质量 控制 
Quality Assurance( QA) 质量 保证 
Quality Control 质量 控制 

R 
Race Condition 竞争 状态 
Rational Unified Process 统一 过 程 
Recovery Testing 恢复 测试 
Refactoring EH 
Regression Analysis And Testing 回归 分 析 和 测试 
Regression Testing 回归 测试 
Release 发 布 
Release Note 版 本 说 明 
Reliability 可 靠 性 
Reliability Assessment 可 靠 性 评估 
Reliability Testing 可 靠 性 测试 
Requirements Management Tool 需求 管理 工具 
Requirements-Based Testing 基于 需求 的 测试 
Return Of Investment 投资 回报 率 
Review 评审 
Risk Assessment 风险 评估 
Risk 风险 
Robustness 强健 性 
Root Cause Analysis 根本 原因 分 析 

S 
Safety 安全 性 
Safety Critical 严格 的 安全 性 
Sanity Testing 健全 测试 
Schema Repository 模式 库 
Screen Shot 抓 屏 .截图 
Security Testing 安全 性 测试 
Security 安全 性 
Serviceability Testing 可 服务 性 测试 
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Severity 

Shipment 

Simple Subpath 
Simulation 

Simulator 

SLA 

Smoke Testing 

Software Development Plan(SDP) 
Software Development Process 
Software Diversity 
Software Element 
Software Engineering 
Software Engineering Environment 
Software Life Cycle 
Source Code 

Source Statement 
Specification 

Specified Input 

Spiral Model 

SQA 

SQL 

Staged Delivery 

State Diagram 

State Transition Testing 
State Transition 

State 

Statement Coverage 
Statement Testing 
Statement 

Static Analysis 

Static Analyzer 

Static Testing 

Statistical Testing 
Stepwise Refinement 
Storage Testing 
Structural Coverage 
Structural Test Case Design 
Structural Testing 
Structured Basis Testing 
Structured Design 
Structured Programming 
Structured Walkthrough 
Stub 

Sub-area 


严重 性 

发 布 

简单 子路 径 
模拟 

模拟 器 
服务 级 别 协议 
冒 烟 测试 
软件 开发 计划 
软件 开发 过 程 
软件 多 样 性 
软件 元 素 
软件 工程 
软件 工程 环境 
软件 生命 周期 
源 代码 

源 语句 
规格 说 明 书 
指定 的 输入 
螺旋 模型 
软件 质量 保证 
结构 化 查询 语句 
分 阶段 交付 
状态 图 

状态 转换 测试 
状态 转换 
状态 

语句 覆盖 
语句 测试 
语句 

静态 分 析 
静态 分 析 器 
静态 测试 
统计 测试 
逐步 优化 
存储 测试 
结构 化 覆盖 


结构 化 测试 用 例 设 计 


结构 化 测试 
结构 化 的 基础 测试 
结构 化 设计 
结构 化 编程 
结构 化 走读 

桩 

子 域 
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Summary 


Symbolic Evaluation 
Symbolic Execution 
Symbolic Trace 
Synchronization 
Syntax Testing 
System Analysis 
System Design 
System Integration 


System Testing 


Technical Requirements Testing 
Test 

Test Automation 

Test Case( TC) 

Test Case Design Technique 
Test Case Suite 

Test Comparator 

Test Completion Criterion 
Test Coverage 

Test Design 

Test Driver 

Test Environment 

Test Execution 

Test Execution Technique 
Test Generator 

Test Harness 

Test Incident Report(TIR) 
Test Infrastructure 

Test Log 

Test Measurement Technique 
Test Metrics 

Test Procedure 

Test Records 

Test Report 

Test Scenario 

Test Script 

Test Specification 

Test Strategy 

Test Suite 

Test Target 

Test Ware 

Testability 

Testing Bed 


Testing Coverage 
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总 结 

符号 评价 
符号 执行 
符号 轨迹 
同步 

语法 分 析 
系统 分 析 
系统 设计 
系统 集成 
系统 测试 


技术 需求 测试 
测试 

测试 自动 化 
测试 用 例 
测试 用 例 设计 技术 
测试 用 例 套 
测试 比较 器 
测试 完成 标准 
测试 覆盖 
测试 设计 
测试 驱动 
测试 环境 
测试 执行 
测试 执行 技术 
测试 生成 器 
测试 用 具 
测试 事故 报告 
测试 基础 建设 
测试 日 志 
测试 度量 技术 
测试 度量 
测试 规程 
测试 记录 
测试 报告 
测试 场景 
测试 脚本 
测试 规格 
测试 策略 
测试 套 

测试 目标 
测试 工具 

可 测试 性 
测试 平台 
测试 覆盖 


Testing Environment 
Testing Пет 
Testing Plan 
Testing Procedure 
Thread Testing 
Time Sharing 
ToolTip 

Top-Down Testing 
Traceability 
Traceability Analysis 
Traceability Matrix 
Trade-Off 
Transaction 
Transaction Volume 
Transform Analysis 
Trojan Horse 

Truth Table 


Tune System 


Unit Testing 
Usability Testing 
Usage Ѕсепагіо 

User Acceptance Test 
User Database 

User Interface(UI) 
User Profile 


User Scenario 


Validation 

Verification 

Verification Test PLAN(VTP) 
Verification & Validation V &-V) 
Version 

Virtual User 


Volume Testing 


Walkthrough 

Waterfall Model 

Web Testing 

White Box Testing 

Work Breakdown Structure( WBS) 


Zero Bug Bounce( ZBB) 


测试 环境 
测试 项 

测试 计划 
测试 过 程 
线程 测试 
时 间 共 享 
控件 提示 或 说 明 
自 顶 向 下 测试 
可 跟踪 性 
跟踪 性 分 析 
跟踪 矩阵 
平衡 

事务 /处 理 
交易 量 
事务 分 析 
特洛伊 木马 
真 值 表 
调试 系统 


单元 测试 
可 用 性 测试 
使 用 场景 
用 户 验收 测试 
用 户 数 据 库 
用 户 界面 
用 户 信 息 
用 户 场 景 


确认 

验证 

验证 测试 计划 
验证 8. 确认 
版 本 

虚拟 用 户 
容量 测试 


走读 

瀑布 模型 
网 站 测试 

白 盒 测试 
任务 分 解 结构 


零 缺陷 反弹 


基本 术语 (中 英 
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附录 B E Z Ж 


1.023) 


1,(27) 


еч 


Ls (2*4) 


n 


列 号 


序号 


1.02") 


11 


10 
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ғ 


1,2) 


10 
11 
12 


10 


11 


12 


13 


14 


15 


16 


І,(2%) 


19 


18 


16 | 17 


15 


12 | 13 | 14 


11 


10 


9. 


8 


1,(3%) 


10 


11 


12 


13 


14 


16 


17 


18 


19 


20 


列 号 


序号 
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Іл(39) 


10 


11 


12 


13 


253 


І,(4Х2%) 


13 


12 


10 


10 


10 
11 
12 
13 
14 


16 


1.64 X2) 


- 


10 
11 


12 
13 
14 
15 
16 
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Lis 4) 


3 


3 


10 
11 
12 
13 
14 
15 
16 


Dia 
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10 
11 


12 
13 
14 
15 
16 
17 
18 


Іл 04 X23) 


10 
11 
12 
13 
14 


16 


1,6 X25) 


10 
11 


12 
13 
14 
15 
16 
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14.(5%) 


K 2 3 4 5 
1 Т 1 1 1 
2 2 2 2 2 
3 3 3 3 3 
4 4 4 4 4 
5 5 5 5 5 
6 1 2 3 4 
7 2 3 4 5 
8 3 4 5 1 
9 4 5 1 2 
10 5 1 2 3 
11 1 3 5 2 
12 2 4 1 3 
13 3 5 2 4 
14 4 1 3 5 
15 5 2 4 1 
16 1 4 2 5 
17 2 5 3 1 
18 3 1 4 2 
19 4 3 5 3 
20 5 2 1 4 
21 1 5 4 3 
22 2 1 5 4 
23 3 2 1 5 
24 4 3 2 
25 5 4 3 2 
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Lu (31X4 X2”) 


序 2 2 4 6 7 8 10 | 11 | 12 | 13 | 14 | 15 
1 0 0 0 0 0 0 0 0 0 0 0 
2 0 1 0 1 0 1 0 1 1 2 2 
3 0 1 1 0 1 0 1 1 0 2 Т 
4 0 0 1 0 Т 1 0 0 0 1 3 
5 0 0 1 1 0 0 0 Т Т! 1 2 
6 0 1 0 1 1 1 1 0 1 0 0 
7 1 0 1 1 1 1 1 1 1 0 1 
8 1 0 0 1 1 0 0 0 1 2 3 
9 1 1 1 0 0 1 0 1 0 0 3 
10 1 0 0 0 0 1 1 0 1 1 1 
11 1 1 0 0 1 0 1 0 0 2 2 
12 1 1 1 1 0 1 1 1 0 1 0 
13 0 0 0 0 1 1 1 1 0 1 2 
14 0 0 1 1 0 0 1 0 0 2 0 
15 0 1 1 1 1 0 1 0 1 1 3 
16 0 0 0 1 1 1 0 1 0 0 1 
17 0 1 1 0 0 1 0 0 1 2 1 
18 0 1 0 0 0 0 1 1 1 0 3 
19 1 0 1 0 0 0 1 0 1 0 2 
20 1 2 0 0 1 1 0 1 1 1 0 
21 1 1 0 1 0 0 0 0 0 1 1 
22 1 0 0 1 0 1 1 Ф 0 2 3 
23 1 0 1 0 1 0 0 $ 1 2 0 
24 1 1 1 1 1 0 0 0 0 2 
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附录 C IEEE 模板 


1. 简介 


IEEE 829 一 1998 , 称 为 829 软件 测试 文档 标准 ,作为 一 个 IEEE 的 标准 定义 了 一 套 文 
МНЕ 8 个 已 定义 的 软件 测试 阶段 。 完 整 的 IEEE 模板 可 以 阅读 IEEE 网 站 www. 


ieee, orgo 
2. IEEE 829 


IEEE 829 一 1998, 称 为 829 软件 测试 文档 标准 ,作为 一 个 IEEE 的 标准 定义 了 一 套 文 
档 用 于 8 个 已 定义 的 软件 测试 阶段 ,每 个 阶段 可 能 产生 自己 单独 的 文件 类 型 。 这 个 标准 
定义 了 文档 的 格式 但 是 没有 规定 它们 是 否 必须 全 部 被 应 用 ,也 不 包括 这 些 文档 中 任何 相 
关 的 其 他 标准 的 内 容 。 

1) 测试 计划 

一 个 管理 计划 的 文档 。 包 括 测试 如 何 完 成 、. 谁 来 做 测试 ,将 要 测试 什么 、 测 试 将 持续 
多 久 测试 覆盖 度 的 需求 等 。 

2) 测试 设计 规格 

详细 描述 测试 环境 和 期 望 的 结果 以 及 测试 通过 的 标准 。 

3) 测试 用 例 规 格 

定义 用 于 运行 于 测试 设计 规格 中 所 述 条 件 的 测试 数据 。 

4) 测试 过 程 规格 

详细 描述 如 何 进行 每 项 测试 ,包括 每 项 预 置 条 件 和 接 下 去 的 步骤 。 

5) 测试 项 传递 报告 

报告 何 时 被 测 的 软件 组 件 从 一 个 测试 阶段 到 下 一 个 测试 阶段 。 

6) 测试 记录 

记录 运行 了 哪个 测试 用 例 , 谁 运行 的 ,以 什么 顺序 ,以 及 每 个 测试 项 是 通过 还 是 失败 。 

7) 测试 附加 报告 

详细 描述 任何 失败 的 测试 项 ,以 及 实际 的 与 之 相对 应 的 期 望 结果 和 其 他 旨 在 揭示 测 
试 为 何 失 败 的 信息 。 这 份 文档 之 所 以 被 命名 为 附加 报告 而 不 是 错误 报告 ,其 原因 是 期 望 
值 和 实际 结果 之 间 由 于 一 些 原因 可 能 存在 差异 ,而 这 并 不 能 认为 是 系统 存在 错误 。 这 包 
括 期 望 值 有 误 、 测 试 被 错误 地 执行 或 者 对 需求 的 理解 存在 差异 。 这 个 报告 由 以 下 所 有 附 
加 的 细节 组 成 ,例如 实际 结果 和 期 望 值 、 何 时 失败 以 及 其 他 有 助 于 解决 问题 的 证 据 。 这 个 
报告 还 可 能 包括 此 附加 项 对 测试 所 造成 影响 的 评估 。 
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8) 测试 摘要 报告 

这 是 一 份 提供 所 有 直到 测试 完成 都 没有 被 提 及 的 重要 的 报告 ,包括 测试 效果 的 评估 、 
被 测试 软件 系统 的 质量 ,来 自 测 试 附加 报告 的 统计 信息 。 这 个 报告 还 包括 执行 了 哪些 测 
试 项 花费 多 少时 间 , 用 于 改进 以 后 的 测试 计划 。 这 份 最 终 的 报告 用 于 指出 被 测 软件 系统 
是 否 与 项 目 管理 者 所 提出 的 可 接受 标准 相符 合 。 


3. 修正 


一 个 对 IEEE 829—1998 的 修正 ,叫做 IEEE 829 一 2008, 发 表 在 2008 年 7 月 18 号 并 
已 经 被 批准 取代 1998 版 本 。IEEE 829 中 可 能 引用 到 的 其 他 标准 : 
IEEE 1008, 用 于 单元 测试 的 标准 。 
IEEE 1012, 用 于 软件 检验 和 验证 的 标准 。 
IEEE 1028, 用 于 软件 检查 的 标准 。 
IEEE 1044, 用 于 软件 异常 分 类 的 标准 。 
IEEE 1044-1 ,软件 异 常 分 类 指南 。 
IEEE 1233 ,开发 软件 需求 规格 的 指南 。 
IEEE 730, 用 于 软件 质量 保证 计划 的 标准 。 
IEEE 1061, 用 于 软件 质量 度量 和 方法 学 的 标准 。 
IEEE 12207, 用 于 软件 生命 周期 过 程 和 软件 生命 周期 数据 的 标准 。 
BSS 7925-1 ,软件 测试 术语 词汇 表 。 
BSS 7925-2, 用 于 软件 组 件 测 试 的 标准 。 
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1. 什么 是 软件 缺陷 ? 


所 谓 软件 缺陷 , 即 计算 机 软件 或 程序 中 存在 的 某 种 破坏 正常 运行 能 力 的 问题 .错误 ， 
或 者 隐藏 的 功能 缺陷 。 缺 陷 的 存在 会 导致 软件 产品 在 某 种 程度 上 不 能 满足 用 户 的 需要 。 
IEEE 729—1983 对 缺陷 有 一 个 标准 的 定义 : 从 产品 内 部 看 ,缺陷 是 软件 产品 开发 或 维护 
过 程 中 存在 的 错误 .毛病 等 各 种 问题 ;从 产品 外 部 看 ,缺陷 是 系统 所 需要 实现 的 某 种 功能 
的 失效 或 违背 。 在 软件 开发 生命 周期 的 后 期 ,修复 检测 到 的 软件 错误 的 成 本 较 高 。 


2. IEEE 给 软件 测试 下 的 定义 是 什么 ? 它 的 目的 是 什么 ? 


1983 年 IEEE( 国 际 电 子 电 气 工程 师 协会 ) 提 出 的 软件 工程 标准 术语 中 给 软件 测试 下 
的 定义 是 : 使 用 人 工 或 自动 手段 来 运行 或 测定 某 个 系统 的 过 程 ,其 目的 在 于 检验 它 是 否 
满足 规定 的 需求 或 是 弄 清 预期 结果 与 实际 结果 之 间 的 差别 。 

测试 的 目的 就 是 希望 能 以 最 少 的 人 力 和 时 间 发 现 潜在 的 各 种 错误 和 缺陷 。 应 根据 开 
发 各 阶段 的 需求 .设计 等 文档 或 程序 的 内 部 结构 精心 设计 测试 用 例 ,并 利用 这 些 实例 来 运 
行程 序 , 以 便 发 现 错误 。 


з. 简单 叙述 软件 测试 过 程 及 每 部 分 的 含义 ? 


软件 测试 过 程 包括 单 元 测试 .集成 测试 .确认 测试 .系统 测试 .验收 测试 等 几 个 环节 。 

(1) 单元 测试 。 

单元 测试 (Unit Testing) ,又 称 模块 测试 ,是 在 软件 开发 过 程 中 要 进行 的 最 低级 别 的 
测试 活动 ,或 者 说 是 针对 软件 设计 的 最 小 单位 程序 模块 进行 的 测试 工作 。 其 目的 在 于 发 
现 每 个 程序 模块 内 部 可 能 存在 的 差错 。 

(2) 集成 测试 。 

集成 就 是 把 多 个 单元 组 合 起 来 形成 更 大 的 单元 。 集 成 测试 (Integration Testing) ,也 
称 为 组 装 测试 或 联合 测试 。 在 单元 测试 的 基础 上 ,将 所 有 模块 按照 设计 要 求 组 装 成 为 子 
系统 或 系统 ,进行 集成 测试 。 通 过 实践 发 现 , 一 些 模块 虽然 能 够 单独 地 工作 ,但 并 不 能 保 
证 连接 起 来 也 能 正常 的 工作 。 程 序 在 某 些 局 部 反映 不 出 来 的 问题 ,在 全 局 上 很 可 能 暴露 
出 来 ,影响 功能 的 实现 。 

(3) 确认 测试 。 

确认 测试 又 称 有 效 性 测试 或 合格 性 测试 CQualification Testing)。 其 目的 是 对 软件 
产品 进行 评估 以 确定 其 是 否 满足 软件 需求 的 过 程 。 确 认 测 试 一 般 通 过 一 系列 黑 盒 测 试 来 
实现 软件 确认 。 在 测试 时 一 般 不 由 软件 开发 人 员 执 行 ,而 应 由 软件 企业 中 独立 的 测试 部 
门 或 第 三 方 测试 机 构 完 成 。 
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(4) 系统 测试 。 

系统 测试 (System Testing) 是 针对 整个 产品 系统 进行 的 测试 ,其 目的 是 验证 系统 是 
否 满足 了 需求 规格 的 定义 , 找 出 与 需求 规格 不 相符 或 与 之 矛盾 的 地 方 。 系 统 测试 的 对 象 
不 仅仅 包括 需要 测试 的 产品 系统 的 软件 ,还 要 包含 软件 所 依赖 的 硬件 .外 设 等 。 系 统 测试 
实际 上 是 针对 系统 中 各 个 组 成 部 分 进行 的 综合 性 检验 ,很 接近 人 们 的 日 常 测试 实践 。 

(5) 验收 测试 。 

验收 测试 即 通过 测试 发 现 错误 ,报告 异常 情况 ,提出 分 析 意 见 , 然 后 再 对 其 进行 改 错 
和 完善 .并 修正 。 验 收 测试 目的 : 向 用 户 表 明 所 开发 的 软件 系统 能 够 像 用 户 所 预定 的 那 
样 工作 。 


4. 软件 测试 的 几 个 原则 是 什么 ? 


(1) 尽早 地 和 不 断 地 进行 软件 测试 。 

(2) 程序 员 应 该 避免 检查 自己 的 程序 。 

(3) 不 可 能 完全 的 测试 。 

(4) 应 该 充分 注意 测试 中 的 群集 现象 。 

(5) 合理 安排 测试 计划 。 

(6) 测试 时 既 要 考虑 合法 情况 ,也 要 考虑 非法 情况 。 

(7) 对 缺陷 结果 要 进行 一 个 确认 过 程 。 

(8) 妥善 保存 测试 计划 ,测试 用 例 .出 错 统计 和 最 终 分 析 报告 ,为 维护 提供 方便 。 


5. 什么 是 白 盒 测试 ? 白 盒 测试 的 步 又? 


白 盒 测试 (White Вох Testing) 又 称 结构 测试 .透明 盒 测试 .逻辑 驱动 测试 或 基于 代 
码 的 测试 。 白 盒 测试 是 一 种 测试 用 例 设 计 方法 盒子? 指 的 是 被 测试 的 软件 ， 白 盒 ? 指 的 
是 盒子 是 可 视 的 ,你 清楚 盒子 内 部 的 东西 以 及 里 面 是 如 何 运作 的 。 白 盒 测试 法 全 面 了 解 
程序 内 部 逻辑 结构 \ 对 所 有 逮 辑 路 径 进行 测试 。 在 使 用 这 种 方法 时 ,测试 者 必须 检查 程序 
的 内 部 结构 ,从 检查 程序 的 逻辑 着 手 , 得 出 测试 数据 。 

白 盒 测试 的 实施 步骤 如 下 所 示 。 

(1) 测试 计划 阶段 : 根据 需求 说 明 书 ,制定 测试 进度 。 

(2) 测试 设计 阶段 : 依据 程序 设计 说 明 书 ,按照 一 定 规范 化 的 方法 进行 软件 结构 划 
分 和 设计 测试 用 例 。 

(3) 测试 执行 阶段 : 输入 测试 用 例 , 得 到 测试 结果 。 

(4) 测试 总 结 阶段 : 对 比 测试 的 结果 和 代码 的 预期 结果 ,分 析 错 误 原因 ,找到 并 解决 
错误 。 

6. 什么 是 静态 测试 和 动态 测试 ? 


静态 测试 就 是 静态 分 析 ,不 实际 运行 被 测 软 件 ,对 模块 的 源 代码 进行 分 析 , 查找 错误 
或 收集 一 些 度量 数据 。 
动态 测试 指 的 是 实际 运行 被 测 程序 ,输入 相应 的 测试 数据 ,检查 实际 输出 结果 和 预期 
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结果 
Ж 


7. 简 述 什么 是 语句 覆盖 、 判 定 覆盖 、 条 件 覆盖 、 判 定 /条 件 覆盖 、 条 件 组 合 覆 盖 和 路 
径 覆 盖 ? 


(1) 语句 覆盖 : 选择 足够 多 的 测试 用 例 , 使 程序 中 每 个 语句 至 少 都 能 被 执行 一 次 。 

(2) 判定 覆盖 : 执行 足够 多 的 测试 用 例 , 使 程序 中 每 个 判定 至 少 都 获得 一 次 “ 真 ” 值 
和 * 假 ? 值 。 

(3) 条 件 覆盖 : 执行 足够 多 的 测试 用 例 ,使 判定 中 的 每 个 条 件 获得 各 种 可 能 的 结果 。 

(4) 判定 /条 件 覆 盖 : 执行 足够 多 的 测试 用 例 , 使 判定 中 每 个 条 件 取 到 各 种 可 能 的 
值 ,并 使 每 个 判定 取 到 各 种 可 能 的 结果 。 

(5) 条 件 组 合 覆盖 : 执行 足够 多 的 测试 用 例 , 使 每 个 判定 中 条 件 的 各 种 可 能 组 合 都 
至 少 出 现 一 次 。 

(6) 路 径 覆盖 : 执行 足够 多 的 测试 用 例 ,覆盖 程序 中 所 有 可 能 的 路 径 。 


8. 什么 是 黑 盒 测 试 ? 


黑 盒 测试 (Black Вох Testing) 也 称 功能 测试 , 它 是 通过 测试 来 检测 每 个 功能 是 否 都 
能 正常 使 用 。 在 测试 中 ,把 程序 看 作 一 个 不 能 打开 的 黑 盒 子 , 在 完全 不 考虑 程序 内 部 结构 
和 内 部 特性 的 情况 下 ,在 程序 接口 进行 测试 , 它 只 检查 程序 功能 是 否 按照 需求 规格 说 明 书 
的 规定 正常 使 用 ,程序 是 否 能 适当 地 接收 输入 数据 而 产生 正确 的 输出 信息 。 黑 盒 测试 着 
眼 于 程序 外 部 结构 ,不 考虑 内 部 逻辑 结构 ,主要 针对 软件 界面 和 软件 功能 进行 测试 。 

软件 黑 盒 测试 是 以 用 户 的 角度 ,从 输入 数据 与 输出 数据 的 对 应 关系 出 发 进行 测试 的 。 
很 明显 ,如 果 外 部 特性 本 身 有 问题 或 规格 说 明 的 规定 有 误 , 用 黑 盒 测试 方法 是 发 现 不 
了 的 。 


9. 什么 是 驱动 模块 和 桩 模块 ? 


驱动 模块 (Driver) : 用 以 模拟 待 测 模块 的 上 级 模块 ;接收 测试 数据 ,并 传送 给 待 测 模 
块 ,启动 待 测 模块 ,并 打印 出 相应 的 结果 。 

桩 模块 (Stub) : 也 称 存根 程序 。 用 以 模拟 待 测 模块 工作 过 程 中 所 调用 的 模块 。 桩 模 
块 由 待 测 模块 调用 ,它们 一 般 只 进行 很 少 的 数据 处 理 ,例如 打印 入 口 和 返回 ,以 便于 检验 
待 测 模块 与 其 下 级 模块 的 接口 。 


10. 什么 是 非 渐 增 式 集 成 ? 


非 渐 增 式 集成 (Big-Bang Integration) 又 称 一 次 性 集成 或 大 棒 式 集成 ,首先 对 每 个 子 
模块 进行 测试 ( 即 单元 测试 ) ,然后 将 所 有 模块 全 部 集成 起 来 一 次 性 进行 集成 测试 。 


11. 什么 是 三 明治 集成 ? 
三 明治 集成 (Sandwich Integration) 又 称 混合 集成 ,综合 了 自 项 向 下 和 自 底 向 上 两 种 
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集成 方法 的 优点 。 桩 模块 和 驱动 模块 的 开发 工作 都 比较 小 。 其 代价 是 一 定 程度 上 增加 了 
定位 缺陷 的 难度 。 


12. 简 述 压力 测试 与 性 能 测试 的 联系 与 区 别 ? 


压力 测试 用 来 保证 产品 发 布 后 系统 能 否 满足 用 户 需求 ,关注 的 重点 是 系统 整体 ;性 能 
测试 可 以 发 生 在 各 个 测试 阶段 ,即使 是 在 单元 层 , 一 个 单独 模块 的 性 能 也 可 以 进行 评估 。 

压力 测试 是 通过 确定 一 个 系统 的 瓶颈 ,来 获得 系统 能 提供 的 最 大 服务 级 别 的 测试 。 
性 能 测试 是 检测 系统 在 一 定 负荷 下 的 表现 ,是 正常 能 力 的 表现 ;而 压力 测试 是 极端 情况 下 
的 系统 能 力 的 表现 。 


13. 简 述 容量 测试 与 压力 测试 的 区 别 ? 


压力 测试 与 容量 测试 十 分 相近 。 二 者 都 是 检测 系统 在 特定 情况 下 ,能 够 承担 的 极 
限 值 。 

(1) 然而 两 者 的 侧重 点 有 所 不 同 ,压力 测试 主要 是 使 系统 承受 速度 方面 的 超额 负载 ， 
例如 一 个 短 时 间 之 内 的 吞吐 量 。 

(2) 容量 测试 关注 的 是 数据 方面 的 承受 能 力 , 并 且 它 的 目的 是 显示 系统 可 以 处 理 的 
数据 容量 。 

(3) 容量 测试 往往 应 用 于 数据 库 方面 的 测试 。 数 据 库容 量 测试 使 测试 对 象 处 理 大 量 
的 数据 ,以 确定 是 否 达 到 了 将 使 软件 发 生 故 障 的 极限 。 容 量 测试 还 将 确定 测试 对 象 在 给 
定时 间 内 能 够 持续 处 理 的 最 大 负载 或 工作 量 。 

压力 测试 和 容量 测试 的 测试 方法 有 相通 的 地 方 ,在 实际 测试 工作 中 ,往往 结合 起 来 进 
行 以 提高 测试 效率 。 

14. 什么 是 安全 性 测试 ? 


安全 性 测试 (Security Testing) 是 有 关 验 证 系统 的 安全 性 和 识别 潜在 安全 性 缺陷 的 
过 程 。 其 目的 是 为 了 发 现 软件 系统 中 是 否 存在 安全 漏洞 。 软 件 安全 性 是 指 在 非 正 常 条 件 
下 不 发 生 安全 事故 的 能 力 。 


15. 简 述 什么 是 模拟 攻击 试验 ?主要 包括 哪些 ? 


模拟 攻击 试验 是 一 组 特殊 的 黑 盒 测试 案例 ,通常 以 模拟 攻击 来 验证 软件 或 信息 系统 
的 安全 防护 能 力 ,包括 冒 充 . 重 演 、 消 息 自 改 口令 猜测 .拒绝 服务 .陷阱 ,木马 ,内 部 攻击 、 
和 外 部 攻击 等 。 


16. 什么 是 可 靠 性 测试 ? 


可 靠 性 测试 (Reliability Testing) 也 称 可 靠 性 评估 , 指 根据 软件 系统 可 靠 性 结构 .寿命 
类 型 和 各 单元 的 可 靠 性 试验 信息 ,利用 概率 统计 方法 ,评估 出 系统 的 可 靠 性 特征 量 。 
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17. 什么 是 健壮 性 测试 ? 


健壮 性 测试 (Robustness Testing) 用 于 测试 系统 在 出 现 故障 时 ,是 否 能 够 自动 恢复 或 
者 忽略 故障 继续 运行 。 为 了 使 系统 具有 良好 的 健壮 性 ,要 求 设计 人 员 在 做 系统 设计 时 必 
须 周密 细致 ,尤其 要 注意 妥善 地 进行 系统 异常 的 处 理 。 


18. 什么 是 兼容 测试 ? 


兼容 测试 (Compatibility Test ) 是 指 检查 软件 之 间 以 及 软件 与 硬件 之 间 是 否 能 够 正 
确 地 进行 交互 和 共享 信息 , 即 兼容 性 的 测试 。 


19. 什么 是 可 用 性 测试 ? 


可 用 性 测试 (Usability Testing) 是 指 选取 有 代表 性 的 用 户 尝试 对 产品 进行 典型 操作 ， 
同时 观察 员 和 开发 人 员 在 一 旁观 察 、 聆 听 、 做 记录 ,用 来 改善 易 用 性 的 一 系列 方法 。 该 产 
品 可 能 是 一 个 网 站 、 软 件 或 者 其 他 任何 产品 , 它 可 能 尚未 成 型 。 


20. 什么 是 安装 测试 ? 


安装 测试 (Installation Testing) ,确保 该 软件 在 正常 情况 和 异常 情况 的 不 同 条 件 下 ， 
首次 安装 、 升 级 、 完 整 的 或 自 定义 的 安装 都 能 进行 安装 。 异 常情 况 包括 磁盘 空间 不 足 \ 缺 
少 目 录 创 建 权限 等 。 核 实 软件 在 安装 后 可 立即 正常 运行 。 安 装 测试 包括 测试 安装 代码 以 
及 安装 手册 。 安 装 手 册 提 供 如 何 进 行 安装 ,安装 代码 提供 安装 一 些 程序 能 够 运行 的 基础 
数据 。 


21. 什么 是 容错 性 测试 ? 


容错 性 测试 也 称 负面 测试 (negative test) ,例外 测试 (exception test) ,主要 检查 系统 
的 容错 能 力 ,检查 软件 在 异常 条 件 下 自身 是 否 具 有 防护 性 的 措施 或 者 某 种 灾难 性 恢复 的 
手段 。 

容错 性 测试 是 检查 软件 在 异常 条 件 下 的 行为 。 容 错 性 好 的 软件 能 确保 系统 不 发 生 无 
法 意料 的 事故 。 当 系统 出 错时 ,能 否 在 指定 时 间 间 隔 内 修正 错误 并 重新 启动 系统 。 


22. 什么 是 配置 测试 ? 


配置 测试 (Configuration Testing) 是 指 在 不 同 的 系统 配置 下 能 和 否 正确 工作 ,配置 包括 
软件 硬件、 网 络 等 。 配 置 测试 主要 是 针对 硬件 ,其 测试 过 程 是 测试 目标 软件 在 具体 硬件 
配置 情况 下 ,出 不 出 现 问题 ,为 的 是 发 现 硬件 配置 可 能 出 现 的 问题 。 有 时 经 常会 与 兼容 性 
测试 或 安装 测试 一 起 进行 。 硬 件 配置 分 为 以 下 几 类 : PC、 组 件 、 外 围 设备 ,接口 、 选 项 和 
内 存 、. 设 备 驱动 等 。 


23. 什么 是 冒 烟 测试 ? 
冒 烟 测试 (Smoke Testing) 在 测试 中 发 现 问题 ,找到 了 一 个 缺陷 ,然后 开发 人 员 会 来 
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修复 这 个 缺陷 。 这 时 想 知道 这 次 修复 是 否 真 的 解决 了 程序 的 缺陷 ,或 者 是 否 会 对 其 他 模 
块 造成 影响 ,就 需要 针对 此 问题 进行 专门 测试 ,这 个 过 程 就 被 为 冒 烟 测 试 。 


24. 什么 是 GUI? 


图 形 用 户 界面 (Graphical User Interface,GUDD) 是 计算 机 软件 与 用 户 进行 交互 的 主要 
方式 。GUI 软件 测试 是 指 对 使 用 GUI 的 软件 进行 的 软件 测试 。 


25. 什么 是 文档 测试 ? 


文档 测试 (Documentation Testing) 是 提交 给 用 户 的 文档 进行 验证 ,目标 是 验证 软件 
文档 是 否 正确 记录 系统 的 开发 全 过 程 的 技术 细节 。 通 过 文档 测试 可 以 改进 系统 的 可 用 
性 、 可 靠 性 .可 维护 性 和 安装 性 。 


26. 什么 是 网 站 测试 ? 


网 站 测试 是 指 当 一 个 网 站 制作 完 上 传 到 服务 器 之 后 针对 网 站 的 各 项 性 能 所 做 的 检测 
工作 。 它 与 软件 测试 有 一 定 的 区 别 ,其 除了 要 求 外 观 的 一 致 性 以 外 ,还 要 求 其 在 各 个 浏览 
器 下 的 兼容 性 ,以 及 在 不 同 环境 下 的 显示 差异 。 


27. 什么 是 恢复 测试 ? 


恢复 测试 (Recovery Testing) 是 指 采 取 各 种 人 工 干预 方式 强制 性 地 使 软件 出 错 , 使 其 
不 能 正常 工作 ,进而 检验 系统 的 恢复 能 力 。 恢 复 测试 通过 测试 一 个 系统 从 如 下 灾难 中 能 
和 否 很 好 地 恢复 ,如 遇 到 系统 崩溃 、 硬 件 损坏 或 其 他 灾难 性 问题 。 恢 复 测 试 时 通过 人 为 地 让 
软件 (或 者 硬件 ) 出 现 故障 来 检测 系统 是 否 能 正确 恢复 ,通常 关注 恢复 所 需 的 时 间 以 及 恢 
复 的 程度 。 


28. 什么 是 协议 测试 ? 


协议 测试 (Protocol Testing) 是 用 来 保证 协议 实现 的 正确 性 和 有 效 性 的 重要 手段 。 
协议 测试 已 经 成 为 计算 机 网 络 和 分 布 式 系统 协议 工程 学 中 最 活跃 的 领域 之 一 。 近 年 来 ， 
协议 一 致 性 测试 技术 得 到 了 很 好 的 发 展 和 完善 。 

29. 什么 是 验收 测试 ? 

验收 测试 (Acceptance Testing) 是 部 署 软 件 之 前 的 最 后 一 个 测试 操作 。 在 软件 产品 
完成 了 功能 测试 和 系统 测试 之 后 .产品 发 布 之 前 所 进行 的 软件 测试 活动 , 它 是 技术 测试 的 
最 后 一 个 阶段 ,也 称 为 交付 测试 。 验 收 测试 的 目的 是 确保 软件 准备 就 绪 , 并 且 可 以 让 最 终 
用 户 将 其 用 于 执行 软件 的 既定 功能 和 任务 。 

30. 简 述 什么 是 a 测试 和 $B 测试 ? 


а 测试 是 指 软件 开发 公司 组 织 内 部 人 员 模 拟 各 类 用 户 行为 对 即将 面市 软件 产品 ( 称 
为 a 版 本 ) 进 行 测试 ,试图 发 现 错误 并 修正 。a 测试 的 关键 在 于 尽 可 能 逼真 地 模拟 实际 运 
行 环境 和 用 户 对 软件 产品 的 操作 并 尽 最 大 努力 涵盖 所 有 可 能 的 用 户 操作 方式 。 经 过 a 测 
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试 调整 的 软件 产品 称 为 B 版 本 。 紧 随 其 后 的 B 测 试 是 指 软件 开发 公司 组 织 各 方面 的 典型 
用 户 在 日 常 工 作 中 实际 使 用 B 版 本 ,并 要 求 用 户 报告 异常 情况 、 提 出 批评 意见 。 然 后 软件 
开发 公司 再 对 8B 版 本 进行 改 错 和 完善 。 


31. 为 什么 需要 软件 评审 呢 ? 


提高 项 目的 生产 率 , 这 是 由 于 早期 发 现 了 错误 ,因而 减少 了 返工 时 间 , 还 可 能 减少 测 
试 时 间 ; 改 善 软件 的 质量 ;在 评审 过 程 中 ,使 开发 团队 的 其 他 成 员 更 熟悉 产品 和 开发 过 程 ; 
通过 评审 ,标志 着 软件 开发 的 一 个 阶段 的 完成 。 


32. 简 述 软件 评审 的 几 个 阶段 ? 


概要 设计 评审 : 在 软件 概要 设计 结束 后 必须 进行 概要 设计 评审 ,以 评价 软件 设计 说 
明 书 中 所 描述 的 软件 概要 设计 在 总 体 结构 、 外 部 接口 .主要 部 件 功能 分 配 、 全 局 数据 结构 
以 及 各 主要 部 件 之 间 的 接口 等 方面 的 合适 性 。 

详细 设计 评审 : 在 软件 详细 设计 阶段 结束 后 必须 进行 详细 设计 评审 ,以 评价 软件 验 
证 与 确认 计划 中 所 规定 的 验证 与 确认 方法 的 合适 性 与 完整 性 。 

数据 库 设 计 评 审 : 在 数据 库 设计 阶段 结束 后 必须 进行 数据 库 设 计 评 审 ,以 评价 数据 
库 的 结构 设计 及 运用 设计 的 合适 性 。 

测试 评审 : 测试 评审 主要 对 测试 的 各 个 环节 进行 评审 。 


33. 自动 化 软件 测试 的 含义 是 什么 ? 


自动 化 软件 测试 ,用 自动 化 测试 工具 来 进行 全 部 或 部 分 测试 ,这 类 测试 一 般 不 需要 人 
为 干预 ,通常 在 GUI, 性 能 等 测试 和 功能 测试 中 用 得 较 多 。 通 过 录制 测试 脚本 ,然后 执行 
这 个 测试 脚本 实现 测试 过 程 的 自动 化 。 软 件 测试 自动 化 是 软件 测试 的 一 个 重要 组 成 部 
分 , 它 能 完成 许多 手工 测试 无 法 实现 或 难以 实现 的 测试 。 正 确 、 合 理 地 实施 自动 测试 ,能 
够 快速 全面 地 对 软件 进行 测试 ,从 而 提高 软件 质量 ,节省 经 费 ,缩短 软件 发 布 周期 。 


34. 什么 是 功能 测试 工具 ? 


功能 测试 工具 主要 用 于 检测 被 测 程序 能 否 达 到 预期 的 功能 要 求 并 能 正常 运行 。 功 能 
测试 工具 一 般 采 用 脚本 录制 (Record)/ 回 放 (Playback) 原 理 , 模 拟 用 户 的 操作 ,然后 将 被 
测 系 统 的 输出 记录 下 来 ,并 同 预先 给 定 的 标准 结果 进行 比较 。 在 回归 测试 中 使 用 功能 测 
试 工具 ,可 以 大 大 减轻 测试 人 员 的 工作 量 ,提高 测试 效果 。 功 能 测试 工具 不 太 适 合 于 版 本 
变动 较 大 的 软件 。 

主流 的 黑 盒 功能 测试 工具 包括 Mercury Interactive 公司 的 WinRunner, QTP, IBM 
Rational 公司 的 TeamTest 和 Robot, Compuware 公司 的 QACenter 等 。 


35. 什么 是 测试 管理 工具 ? 


测试 管理 工具 是 指 帮助 完成 制定 测试 计划 、 跟 踪 测 试 运行 结果 等 的 工具 。 测 试管 理 
工具 主要 对 软件 缺陷 ,测试 计划 ,测试 用 例 、 测 试 实 施 进行 管理 。 一 个 小 型 软件 项 目 可 能 
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有 数 千 个 测试 用 例 要 执行 ,使 用 捕获 /回放 工具 可 以 建立 测试 并 使 其 自动 执行 ,但 仍 需要 
测试 管理 工具 对 成 千 上 万 个 杂乱 无 章 的 测试 用 例 进 行 管理 。 

测试 管理 工具 的 代表 有 Rational 公司 的 Test Manager、Compureware 公司 的 
TrackRecord 等 软件 。 


36. 软件 测试 存在 哪些 误区 ? 


(1) 忽视 需求 阶段 的 参与 。 

(2) 软件 开发 完成 后 进行 软件 测试 。 

(3) 期 望 短期 通过 增加 软件 测试 投入 ,迅速 达到 零 缺陷 率 。 

(4) 规范 化 软件 测试 使 项 目 成 本 增加 。 

(5) 期 望 用 测试 自动 化 代 蔡 大 部 分 人 工 劳动 。 

(6) 软件 测试 是 技术 要 求 不 高 的 岗位 。 

(7) 软件 发 布 后 如 果 发 现 质量 问题 , 那 是 软件 测试 人 员 的 错 。 

(8) 软件 测试 是 测试 人 员 的 事情 ,与 程序 员 无 关 。 

(9) 项 目 进度 吃紧 时 可 以 少 做 些 测试 ,等 到 时 间 富 裕 时 再 多 做 测试 。 
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一 、 选 择 题 (每 小 题 2 分 , 共 50 分 ) 
1. 软件 生存 周期 过 程 中 ,修改 错误 代价 最 大 的 阶段 是 ә 


А. 需求 阶段 B. 设计 阶段 C. 编程 阶段 D. 发 布 运行 阶段 
2. 下 面 说 法 正确 的 是 ә 
А. 我 们 无 法 测试 一 个 程序 确认 它 没 有 错误 
B. 黑 盒 测试 是 迎 辑 驱动 的 测试 
С. 穷 举 测 试 一 定 可 以 暴露 数据 敏感 错误 
D. 白 盒 测试 是 一 种 输入 输出 驱动 的 测试 
3. 软件 测试 的 目的 是 o 
А. 评价 软件 的 质量 B. 发 现 软件 的 错误 
C. 找 出 软件 中 所 有 的 错误 D. 证 明 软 件 是 正确 的 
4. 不 用 执行 程序 ,目的 是 收集 有 关 程 序 代 码 的 结构 信息 ,这 一 过 程 是 
A. 性 能 测试 В. 静态 分 析 C. 增 量 测试 D. 大 突击 测试 


5. 测试 程序 时 不 在 机 器 上 直接 运行 程序 ,而 是 采用 人 工 检 查 或 计算 机 辅助 静态 分 析 
的 手段 检查 程序 ,这 种 测试 称 为 
А. 白 盒 测试 В. 黑 盒 测试 с. 静态 测试 D. 动态 测试 
6. 下 列 有 关 黑 盒 测试 的 叙述 中 ,错误 的 是 
А. 黑 盒 测试 是 在 不 考虑 源 代 码 的 情形 下 进行 的 一 种 软件 测试 方法 
В. 最 好 有 测试 人 员 .最 终 用 户 和 开发 人 员 组 成 的 团队 来 实施 黑 盒 测试 
С. 黑 盒 测试 主要 是 通过 对 比 和 分 析 实 测 结果 和 预期 结果 来 发 现 它们 之 间 的 差 
异 , 所 以 黑 盒 测试 又 称 为 数据 驱动 "测试 
D. 数据 流 测 试 是 一 种 黑 盒 测 试 方法 


7. 在 边界 值 分 析 中 ,下 列 数据 通常 不 用 来 作为 测试 数据 的 是 é 
А. 正好 等 于 边界 的 值 В. 等 价 类 中 的 典型 值 
C. 刚刚 大 于 边界 的 值 D. 刚刚 小 于 边界 的 值 

8. 下 列 测试 方法 中 不 属于 黑 盒 测试 的 是 2 
А. 基本 路 径 测试 法 B. 等 价 类 分 析 法 


C. 边界 值 分 析 法 D. 正 交 表 测试 法 
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9. 因果 图 法 最 终生 成 的 是 
A. 输入 输出 关系 B. 正 交 表 С. 等 价 类 D. 决策 表 
10. 一 个 用 户 的 应 用 系统 通常 有 用 户 管理 功能 ,可 以 增加 新 用 户 , 假 设 规定 用 户 名 必 
须 以 字母 开头 ,不 超过 8 个 字符 的 字母 数字 串 ,那么 ,下 面 那 组 值 属 于 用 户 名 的 有 效 等 价 
类 
А. а111111. L, Liu-Yie, Lin-feng 
B. L1, A111111, glenford, 123h123 
C. Linyifei, a111111, glenford, Myers 
D. Linyifei, а111111. glenford, G. Myers 
11. 在 软件 测试 用 例 设 计 的 方法 中 ,最 常用 的 方法 是 黑 盒 测试 和 和 白 盒 测试 ,其 中 不 属 
于 白 盒 测试 关注 的 是 


A. 程序 结构 B. 软件 外 部 功能 ” C. 程序 正确 性 D. 程序 内 部 逻辑 
12. 以 程序 内 部 的 多 辑 结构 为 基础 的 测试 用 例 设 计 技术 属于 

А. 灰 盒 测试 B. 数据 测试 C. 黑 盒 测试 D. HAW 
13. 代码 走 查 的 目的 是 А 


А. 发 现 缺陷 .遗漏 和 矛盾 的 地 方 
В. 确认 程序 逻辑 与 程序 规格 说 明 的 一 致 性 
C. 验证 需求 变更 的 一 致 性 
D. 证 明 程 序 确认 是 按照 用 户 的 需求 工作 的 
14. 如 果 程 序 通过 了 100% 的 代码 覆盖 率 测试 , 则 说 明 程 序 满足 了 қ 
А. 语句 覆盖 В. 编程 规范 C. 设计 规格 D. 功能 需求 
15. 设计 一 段 程序 如 下 : 


ІЁ ((a==b) апа ((c==d) or (e==f))) do 51 
Else if ((р--а) ог (в--%)) do 52 


Else do 53 
满足 判定 /条 件 覆 盖 ( 分 支 -谓词 覆盖 ) 的 要 求 ,最 少 的 测试 用 例 数目 是 
A. 6 В.8 5-3 D. 4 
16. 如 果 一 个 判定 中 的 复合 条 件 表达 式 为 (A 二 0)OR(B 一 =3) , 则 为 了 达到 100%) 
判定 覆盖 率 ,至 少 需要 设计 多 少 个 测试 用 例 А 
А. 1 В. 2 С. з D. 4 
17. 路 径 覆 盖 必 定 满 足 
А. 语句 覆盖 В. 条 件 覆 盖 
С. 判定 /条 件 覆 盖 D. 条 件 组 合 覆 盖 
18. 下 列 几 种 多 辑 覆盖 标准 中 ,设计 足够 的 测试 用 例 ,运行 被 测 程序 ,使 得 程序 中 所 
有 可 能 的 路 径 至 少 执行 一 次 , 称 为 Р 
А. 判定 覆盖 В. 条 件 覆 盖 с. 语句 覆盖 D. 路 径 覆 盖 


19. 阅读 下 列 程序 : 


Int func (int а,Б,с) 
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1 


Int k=1; 
If ((а>0) |І (b<0) |І (ағс>0)) k=k+a; 
Else К=К+Ы; 


If (с>0) к-Кғс; 
Return К; 
} 


采用 测试 用 例 : (а.Һ.с)-(1,1,-12,(1,1.12,-11.,1,12,(0,1,10,Я п 
的 逻辑 覆盖 是 è 
А. 判定 覆盖 В. 条 件 覆盖 С. 语句 覆盖 D. 条 件 组 合 覆 盖 
20. 如 果 程序 中 有 两 个 判定 ,其 组 合 条 件 表 达 式 分 别 是 (a 二 二 3)and(b 三 = 二 0) 以 及 
(а2>=0)ог(с<2)), у Т ЖЖ P| 100% 的 判定 覆盖 ,至少 需要 设计 的 测试 用 例 个 数 
为 


А. 1 В. 2 С. з D. 4 
21. 在 以 下 有 关 集 成 测试 的 说 法 中 ,错误 的 说 法 是 o 

А. 自 底 向 上 集成 的 缺点 是 在 早期 不 能 进行 并 行 测试 ,不 能 充分 利用 人 力 

В. 自 底 向 上 集成 的 优点 是 减少 了 编写 桩 模块 的 工作 量 

с. 自 项 向 下 集成 的 优点 是 能 够 较 早 地 发 现在 高 层 模块 接口 .控制 等 方面 的 问题 

р. 自 项 向 下 集成 的 缺点 是 需要 设计 许多 的 桩 模块 ,测试 的 开销 较 大 
22. 下 面 有 关 渐 增 式 集成 和 非 渐 增 式 集成 的 说 法 中 错误 的 是 Қ 

А. 非 渐 增 式 集成 测试 方法 把 单元 测试 和 集成 测试 分 成 两 个 不 同 的 阶段 ,而 渐 增 

式 集成 测试 方法 往往 把 单元 测试 和 集成 测试 合 在 一 起 同时 完成 
В. 渐 增 式 集成 需要 较 多 的 工作 量 ,而 非 渐 增 式 集成 需要 的 工作 量 较 少 
с. 渐 增 式 集成 可 以 较 早 地 发 现 接口 错误 ,而 非 渐 增 式 集 成 直到 最 后 组 装 时 才能 


发 现 接 口上 的 问题 
D. 渐 增 式 集成 容易 定位 和 改正 错误 ,而 非 渐 增 式 集成 发 现 错误 较 迟 且 较 能 判断 
错误 位 置 
23. 用 来 代替 被 测 模块 的 子 模块 的 是 。 
А. 驱动 模块 В. 桩 模块 C. 调用 模块 D. 配置 模块 
24. 下 列 关 于 a 测试 的 描述 中 错误 的 是 
А. a 测试 需要 用 户 代表 参加 В. a 测试 不 需要 用 户 代表 参加 
С. a 测试 是 系统 测试 的 一 种 D. a 测试 不 属于 验收 测试 
25. 通常 对 于 网 站 系统 ,关于 用 户 数 的 统计 主要 有 8 
А. 注册 用 户 数 В. 在 线 用 户 数 
C. 同时 发 请 求 用 户 数 D. 以 上 全 部 


二 ,论述 题 ( 每 小 题 10 分 , 共 50 分 ) 
І. 以 下 是 某 软 件 项 目 规格 说 明 ,请 按 要 求 回答 问题 。 
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某 一 软件 项 目 规格 说 明 : 对 于 处 于 提交 审批 状态 的 单据 ,数据 完成 率 达 到 80% Е 
或 已 经 过 业务 员 确 认 , 则 进行 处 理 。 

(1) 确定 软件 规格 中 的 原因 和 结果 。 

(2) 画 出 对 应 的 因果 图 。 

(3) 把 因果 图 转换 为 决策 表 。 

2. 以 下 是 某 C 程序 段 ,其 功能 是 计算 输入 数字 的 阶乘 ,请 仔细 阅读 程序 并 完成 要 求 。 


#include< studio.h> 

#include< studlib.h> 

int main () 

1 

int і-0; кі И 

int п; 

int f=1 /* 保存 阶乘 的 结果 * / 

Puts ("please input the number п:"); 

Scanf ("%d", &п); 

if (n<=0) /* 判断 输入 的 数 是 否 大 于 或 等 于 0x* / 
{ 

Printf ("please input ап interger>=0. Ап"); 
Return 0; 

} 

if (n==0) /* 0 的 阶乘 为 1* / 

{ 

Printf("factorial of 0 is 1. \п"); 

Return 07 

} 

і=1; 

While (i<=n) 

{ 

F=f* I; 

i++; 

} 

Printf ("factorial of %415: %d.\n", n, f); 
Getch () 7 

Return 07 


} 


(1) 画 出 此 程序 的 控制 流 图 。 

(2) 设计 一 组 测试 用 例 ,使 该 程序 的 语句 覆盖 率 和 分 支 覆 盖 率 均 能 达到 100%. ШІ 
该 程序 的 语句 覆盖 率 和 分 支 覆 盖 率 无 法 达到 100% , 则 说 明 为 什么 。 

3. 我 国 很 多 城市 的 固定 电话 号 码 由 三 部 分 组 成 : 

。 地 区 码 ,空白 或 三 位 数字 。 

。 电话 号 码 ,以 非 0、 非 1 开头 的 三 位 数字 。 
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。 电话 号 码 后缀 ,四 位 数字 。 

试 根据 等 价 类 划分 法 设计 有 效 等 价 类 和 无 效 等 价 类 ? 并 设计 测试 用 例 ? 

4. 有关 个 人 信息 输入 问题 。 在 一 个 信息 系统 中 ,员工 信息 查询 功能 是 常见 的 功能 。 
例如 , 设 有 3 个 独立 的 查询 条 件 ,以 获得 特定 员工 的 个 人 信息 。 如 果 采 用 正 交 表 测 试 , 试 
写 出 有 哪 几 个 因素 ,每 个 因素 有 哪 几 个 水 平 ;选择 合适 正 交 表 , 并 设计 测试 用 例 。 


员工 号 (ID)， 
员工 姓名 (Name): 
员工 邮件 地 址 (Mail Address): 


5. 用 白 盒 法 测试 以 下 程序 段 , 画 出 程序 的 控制 流 图 。 


Procedure (VAR А,В,Х: REAL) 7 
BEGIN 
IF (A>2) AND (B=0) 
THEN X:=X/A; 
IF (А-4) OR (01) 
THEN X:=X+1 
END; 
(1) 按照 “语句 覆盖 准则 ”设计 测试 用 例 ,并 说 明 执行 路 径 。 
(2) 按照 “判定 覆盖 ”设计 测试 用 例 ,并 说 明 执行 路 径 。 
(3) 按照 * 条 件 覆 盖 ” 设 计 测试 用 例 , 并 说 明 执行 路 径 和 条 件 取 值 。 
(4) 按照 “判定 /条 件 覆盖 ”设计 测试 用 例 , 并 说 明 执行 路 径 和 条 件 取 值 。 
(5) 按照 "条 件 组 合 覆盖 ?设计 测试 用 例 ,并 说 明 执行 路 径 ,条件 取 值 和 覆盖 组 合 。 
(6) 按照 "路径 覆 盖 ?设计 测试 用 例 ,并 说 明 执行 路 径 。 
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